Численность населения России по населённым пунктам

Получение, новые источники, открытость
sadless74
Завсегдатай
Сообщения: 310
Зарегистрирован: 25 май 2009, 13:50
Репутация: 43

Re: Численность населения России по населённым пунктам

Сообщение sadless74 » 17 июл 2013, 21:56

RTFM!!!

Если почитать законы http://www.perepis-2010.ru/documents/ :
- ФЕДЕРАЛЬНЫЙ ЗАКОН О ВСЕРОССИЙСКОЙ ПЕРЕПИСИ НАСЕЛЕНИЯ (в ред. Федеральных законов от 28.11.2009 N 293-ФЗ, от 27.07.2010 N 204-ФЗ)
Статья 10. Подведение итогов Всероссийской переписи населения и их опубликование
2. Итоги Всероссийской переписи населения являются доступными каждому и подлежат официальному опубликованию.
Статья 11. Источники финансирования Всероссийской переписи населения
1. Финансирование расходов, связанных с подготовкой и проведением Всероссийской переписи населения, подведением и опубликованием ее итогов, осуществляется за счет средств федерального бюджета.

- Постановление от 12 ноября 2010 г. №896 О подведении итогов Всероссийской переписи населения 2010 года
В соответствии с Федеральным законом «О Всероссийской переписи населения» Правительство Российской Федерации постановляет:
1. Утвердить прилагаемые Правила подведения итогов Всероссийской переписи населения 2010 года.
2. Федеральной службе государственной статистики обеспечить официальное опубликование итогов Всероссийской переписи населения 2010 года.
Председатель Правительства Российской Федерации В.Путин
Приложение к Постановлению от 12 ноября 2010 г. №896 "Правила подведения итогов Всероссийской переписи населения 2010 года"
5. Итоги Всероссийской переписи населения 2010 года являются общедоступными и подлежат распространению путем:
официального опубликования в «Российской газете», имея в виду, что итоги первого этапа подведения итогов переписи публикуются до 31 мая 2011 г., второго этапа - до 30 июня 2012 г. и третьего этапа - до 31 декабря 2012 г.;
размещения до 31 декабря 2013 г. в виде тематических сборников в печатных и электронных официальных изданиях Федеральной службы государственной статистики;
размещения для всеобщего доступа в информационно-телекоммуникационных сетях, в том числе для бесплатного доступа на официальном сайте Федеральной службы государственной статистики в сети Интернет.

================
- Концепция распространения итогов Всероссийской переписи населения 2010 года

В документе написано про что угодно кроме условий использования данных переписи.

в разделе 6. пишут что в Том 1 будут входить интересующие нас данные, но
Том 1. Численность и размещение населения
В сборнике содержатся данные о численности городского и сельского населения, мужчин и женщин по Российской Федерации, федеральным округам, субъектам Российской Федерации.
Данные в разрезе субъектов Российской Федерации приводятся по административно-территориальным и муниципальным образованиям.
По административно-территориальным образованиям представлены сведения о числе районов, городов, внутригородских районов (округов), поселков городского типа, сельских населенных пунктов. Приводятся данные о численности населения районов, городских населенных пунктов, сельских населенных пунктов - центров районов, сельских населенных пунктов с численностью жителей 3 тысячи и более человек, а так же группировки районов, городских и сельских населенных пунктов, по числу жителей.
По муниципальным образованиям представлены сведения о числе городских округов, муниципальных районов, городских и сельских поселений. Приводятся данные о численности населения по городским округам, муниципальным районам, городским и сельским поселениям, городским населенным пунктам, сельским населенным пунктам – центрам муниципальных районов, а также группировки городских округов, муниципальных районов, городских и сельских поселений по числу жителей.
Согласно выше изложенному данных на каждую деревню могут и не включать. А группировки неподходят :(

в разделе 7. Помимо опубликования официального издания, общедоступность итогов Всероссийской переписи населения 2010 года в соответствии с Федеральным законом «О Всероссийской переписи населения» (ст.10, п.2) будет обеспечена путем размещения сборников в свободном интернет-доступе, а также посредством бесплатного распространения их среди следующих организаций (по 1 экземпляру):


Таким образом:
1. Доступ к данным должен быть бесплатным для бесплатного доступа на официальном сайте Федеральной службы государственной статистики в сети Интернет.

2. Про условия использования данных конкретной информации не увидел...

sadless74
Завсегдатай
Сообщения: 310
Зарегистрирован: 25 май 2009, 13:50
Репутация: 43

Re: Численность населения России по населённым пунктам

Сообщение sadless74 » 18 июл 2013, 05:43

bim2010, Спасибо за ссылки. Обязательно добавлю. Похоже данные переписи 2010 всё таки будут опубликованы.

Проверил недоступные сайты.
Появились данные по всем населённым пунктам : 07 - Кабардино-Балкарская республика, 15 - Республика Северная Осетия - Алания, 30 - Астраханская область

Очень жаль что 76 - Ярославская область данные только от сельских поселений, для населённых пунктов только группировки :(

83 - Ненецкий автономный округ - портал развернут, но данные пока не загружены.

Полный архив ~850Мб. Отдельные файлы на фтп, кодировка названий папок UTF8.

bim2010
Гуру
Сообщения: 977
Зарегистрирован: 27 янв 2009, 22:57
Репутация: 258

Re: Численность населения России по населённым пунктам

Сообщение bim2010 » 18 июл 2013, 06:12

del
Последний раз редактировалось bim2010 21 авг 2013, 21:06, всего редактировалось 1 раз.

sadless74
Завсегдатай
Сообщения: 310
Зарегистрирован: 25 май 2009, 13:50
Репутация: 43

Re: Численность населения России по населённым пунктам

Сообщение sadless74 » 19 июл 2013, 07:27

Проект: Численность населения России по всем населённым пунктам.

Описание:
- Для различных задач иногда возникает потребность узнать численность населения России по всем населённым пунктам РФ.
- Единственный открытый источник данных о численности населения РФ это результаты переписи 2010 года. Данные переписи собраны на сайте http://www.perepis-2010.ru
- Полные результаты переписи 2010 публикуются на сайтах Территориальных органов Федеральной службы государственной статистики.
Дополнительные базы
- ОКАТО, ФИАС (КЛАДР)
- Государственный каталог географических названий

Цель: создать открытый слой пространственных данных, который можно применять в различных ГИС для различных (статистических, логистических, картографических) задач.

В результате пространственные данные будет включать следующие поля для каждого населенного пункта:

- код ОКАТО
- название субъекта федерации
- название административного района
- тип пункта
- название на русском
- широта центра
- долгота центра
- численность (по данным переписи 2010)
- дата актуализации
- численность (на дату актуализации)

Принципы реализации проекта:

Использование только открытых источников. Не копируем с других карт и баз данных использующих закрытые источники (например geonames), википедии, в той части где указаны другие источники-карты, готовые подобные слои других, как правило коммерческих, организаций и т.п.


Задачи:

0. Установление законности, лицензионной чистоты подобной работы.
1. Сбор результатов переписи 2010 с сайтов Территориальных органов Федеральной службы государственной статистики
2. Необходимо выделить и перевести исходные данные (распарсить)
3. Автоматическое сравнение результата с проверочными БД (ОКАТО, ФИАС), если полного совпадения нет, индикация и предложение ближайших похожих (геокодирование).
4. Разделение результатов на регионы проверки.
5. Ручная доводка результатов по регион, проверка и исправление с использованием тех же проверочных БД
6. Добавление поля субъект федерации со значением
7. Добавление поля административный район
8. Добавление поле тип населенного пункта
9. Добавление полей широта и долгота
10. Поиск актуальной информации о численности и дополнение к существующим данным

Координатор: точно не я, По опыту прошедших проектов...
- выполняет основную часть работы
- умеет программировать
- виртуозно обращается с ГИС программами



Схема работы:

- Для участия в проекте, вам понадобится: 1) желание, 2) регистрация в форуме, 3) средней мощности компьютер и периодический доступ к интернет.

- Выберите незанятый регион и записаться на форуме, ваше имя (ник на форуме) будет добавлено в таблицу, ваш участок будет помечен как занятый;

- Скачайте shape-файл с точками

- Загрузите shape-файл в ГИС, включите его на редактирование, добавьте подложку OSM доступную через WMS сервер: http://irs.gis-lab.info/?layers=osm

Проверьте, соответствует ли
- расположение на карте региона названию населённого пункта
- правильность кода ОКАТО, численность населения по данным переписи 2010

Если да, см. дальше.

Если неправильно стоит точка на карте - перенести в нужное место
Если ошибочны данные ОКАТО или численности - исправить их

Если есть информация об актуальной численности заполнить два поля (дата актуальности, актуальная численность), если нет то оставить незаполненными.

- Пришлите результаты координатору проекта через форум или по электронной почте, ваш участок будет помечен как сделанный.

Результаты должны включать:

- shape-файл с точками

Внимание: мы призываем не использовать другие источники при работе над этим проектом, это касается любых сайтов или баз данных о чесленности населения и коммерческих картографических систем.


Ожидаемые результаты: Данные могут быть использованы различными способами. В качестве возможных примеров:
- Автоматизированная проверка (валидатор) данных о численности населенных пунктов в проектах OpenStreetMap, Wikipedia.
- Разместить на своем сайте интерактивную карту каких либо данных в зависимости от числености населения в конкретном регионе
- Проводить статистический анализ данных и делать выборки по различным параметрам (для всей РФ, отдельных субъектов и районов)


Ожидаемые сроки: не известно


Обновление данных: Данные будут обновляться по мере поступления сообщений об ошибках. Режим обновления пока не отработан. Если вы хотите внести свой вклад в уточнение данных, у вас есть следующие возможности:

- Сообщить о необходимом исправлении по электронной почте.
- Сообщить о необходимом исправлении в специальной теме форума.

Внести исправление в вики-таблицу конкретного региона. Ссылки на эти таблицы можно найти в таблице результатов. Если реакции на нее не последовало, вы можете также напомнить о ней в форуме.

Аватара пользователя
Максим Дубинин
MindingMyOwnBusiness
Сообщения: 9128
Зарегистрирован: 06 окт 2003, 20:20
Репутация: 747
Ваше звание: NextGIS
Откуда: Москва
Контактная информация:

Re: Численность населения России по населённым пунктам

Сообщение Максим Дубинин » 19 июл 2013, 09:47

вики намеренно игнорируем?
пристегивайтесь, турбулентность прямо по курсу

Аватара пользователя
paleogis
Модератор
Сообщения: 1112
Зарегистрирован: 22 мар 2009, 08:54
Репутация: 200
Ваше звание: Модератоо

Re: Численность населения России по населённым пунктам

Сообщение paleogis » 19 июл 2013, 09:59

Максим прав, лучше все это перенести в вики.

sadless74
Завсегдатай
Сообщения: 310
Зарегистрирован: 25 май 2009, 13:50
Репутация: 43

Re: Численность населения России по населённым пунктам

Сообщение sadless74 » 19 июл 2013, 09:59

В вики перенести не проблема. Обязательно итоговый вариант перенесу.
У меня нет видения, как всё должно получиться. Может что-то не так пишу.
Посоветовали накидать болванку проекта. Написал проект, почитав несколько прошедших проектов.

Использую форум по прямому назначению. Предлагаю варианты, ожидаю обсуждения, критики.
Стараюсь сделать часть работы, которую смогу, чтобы потом кому-нибудь сберечь время.
Последний раз редактировалось sadless74 19 июл 2013, 12:09, всего редактировалось 1 раз.


Petruxin
Гуру
Сообщения: 1695
Зарегистрирован: 14 июн 2011, 16:47
Репутация: 133
Ваше звание: Завсегдатай
Откуда: Череповец

Re: Численность населения России по населённым пунктам

Сообщение Petruxin » 19 июл 2013, 12:29

Может есть смысл в Вики добавить таблицу с исходными shp?

[ Сообщение с мобильного устройства ]

sadless74
Завсегдатай
Сообщения: 310
Зарегистрирован: 25 май 2009, 13:50
Репутация: 43

Re: Численность населения России по населённым пунктам

Сообщение sadless74 » 19 июл 2013, 12:41

Прошу не торопиться.
Проект ещё в стадии сбора копии данных о переписи 2010 с сайтов региональных росстатов.
А так же в дооформлении задания и подготовке сопутствующих страниц, скриптов, смежных данных.

Исходных shp ещё не существует!
Данные о переписи представлены в различных форматах (pdf, htm, doc, docx, xls, xlsx, mht).
Извлекать её это будет уже наверное половина дела.
Потом геокодировать. И потом визуально проверять правильность, что тоже потребует уйму времени.

Так же перед стартом нужно подтвердить законный статус этой информации.
Выше предлагали письмо написать... думаю стоит это сделать...

Задачи текущего момента:
- Написать письмо в Росстат
- Найти данные по:
2 Республика Башкортостан
3 Республика Бурятия
4 Республика Алтай
8 Республика Калмыкия
16 Республика Татарстан
17 Республика Тыва
18 Удмуртская республика
20 Чеченская республика
42 Кемеровская область
44 Костромская область
47 Ленинградская область
48 Липецкая область
50 Московская область
54 Новосибирская область
55 Омская область
56 Оренбургская область
58 Пензенская область
60 Псковская область
64 Саратовская область
65 Сахалинская область
67 Смоленская область
68 Тамбовская область
69 Тверская область
70 Томская область
71 Тульская область
72 Тюменская область
- Если совсем хочется в бой то парсить уже имеющиеся данные в табличный вид

bim2010
Гуру
Сообщения: 977
Зарегистрирован: 27 янв 2009, 22:57
Репутация: 258

Re: Численность населения России по населённым пунктам

Сообщение bim2010 » 19 июл 2013, 15:14

del
Последний раз редактировалось bim2010 21 авг 2013, 21:07, всего редактировалось 1 раз.

bim2010
Гуру
Сообщения: 977
Зарегистрирован: 27 янв 2009, 22:57
Репутация: 258

Re: Численность населения России по населённым пунктам

Сообщение bim2010 » 20 июл 2013, 23:40

del
Последний раз редактировалось bim2010 21 авг 2013, 21:07, всего редактировалось 1 раз.

bim2010
Гуру
Сообщения: 977
Зарегистрирован: 27 янв 2009, 22:57
Репутация: 258

Re: Численность населения России по населённым пунктам

Сообщение bim2010 » 22 июл 2013, 14:41

del
Последний раз редактировалось bim2010 21 авг 2013, 21:08, всего редактировалось 2 раза.

sadless74
Завсегдатай
Сообщения: 310
Зарегистрирован: 25 май 2009, 13:50
Репутация: 43

Re: Численность населения России по населённым пунктам

Сообщение sadless74 » 23 июл 2013, 07:31

в таблице Число районов, городских и сельских населенных пунктов по субъектам Российской Федерации общие данные:

Российская Федерация:
Города - 1100
Поселки городского типа - 1286
Сельские населенные пункты - 153124
в том числе без населения - 19416

Итого 1100+1286+153124+19416 = 174 926

Возникла идея. Пусть будет база на 175 000 записей, чтобы у каждого населенного пункта был свой уникальный ID.
Тогда будет не важно есть или нет ОКАТО, совпадающие названия и прочие заморочки.
Заполнять имеющимися данными, а чего не хватает решать отдельно.

bim2010
Гуру
Сообщения: 977
Зарегистрирован: 27 янв 2009, 22:57
Репутация: 258

Re: Численность населения России по населённым пунктам

Сообщение bim2010 » 23 июл 2013, 09:39

del
Последний раз редактировалось bim2010 21 авг 2013, 21:09, всего редактировалось 1 раз.

Ответить

Вернуться в «Данные»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 6 гостей