Данные об избирательных комиссиях в машиночитаемом виде

На региональных сайтах избирательных комиссий (субодомены сайта ЦИК) появилась информация о всех территориальных и участковых избирательных комиссиях (например Алтайский край). К сожалению, исходно информация предоставляется не в машиночитаемом виде, что препятствует эффективному ее использованию для анализа данных и картографии. Нами были написали скрипты для скачивания всех данных о комиссиях и здесь можно получить полную БД в машиночитаемом виде.

[править] Общая информация

Для каждой избирательной комиссии предоставляется следующая информация:

• Наименование избирательной комиссии
• Адрес комиссии
• Телефон
• Факс
• Адрес электронной почты
• Срок окончания полномочий

Для подавляющего большинства участковых избирательных комиссий факс и адрес электронной почты не указаны.

Также указана информация по каждому члену избирательной комиссии и по резерву в участковые избирательные комиссии:

• Фамилия Имя Отчество
• Должность (председатель/зам. председателя/секретарь/член)
• субъект, предложивший данную кандидатуру в состав комиссии

[править] Скачать данные

Ниже представлены данные, скачанные с сайтов избирательных комиссий субъектов РФ.

Актуальность: 14.09.2021

• Единая БД по всем данным ЦИК в формате SQLite
• Адреса, телефоны и пр. избирательных комиссий (CSV)
• Составы комиссий (CSV)
• Резерв участковых избирательных комиссий (CSV)
• Исходные данные: html-страницы (файл)

[править] Архив

Чтобы скачать предыдущие версии данных, необходимо поменять дату в ссылках на другую, имеющуюся в архиве. Доступны следующие даты:

• 20140404
• 20140629
• 20141119
• 20150915
• 20160229
• 20160629
• 20170121
• 20170719
• 20180215
• 20180709
• 20180906
• 20190101
• 20190313
• 20190617
• 20190905
• 20191110
• 20200212
• 20200610
• 20200628
• 20200910
• 20210208
• 20210630

[править] Структура данных

Таблица адресов избирательных комиссий (cik_uik):

Таблица составов избирательных комиссий (cik_people):

Таблица резервов участковых избирательных комиссий (cik_people_reserve):

[править] Недостатки

У представленных данных есть несколько недостатков

1. Неполная адресная информация об УИК

Адрес участковой избирательной комиссии (УИК) определяется постановлением главы соответствующего муниципального образования или решением ТИК. Обычно в этих документах указывают не только почтовый адрес УИК, но также и название соответствующего здания (школа, дом культуры, клуб, и пр.). В представленных на сайтах избирательных комиссий субъектов РФ информация о типе здания во многих случаях опускается. Кроме того, там не делается различий между адресом помещения для голосования и адресом избирательной комиссии.

2. Актуальность информации

Непонятна актуальность информации. Составы комиссий и адреса УИК время от времени меняются. Из представленных данных неясно, какие из этих изменений учтены.

3. Территории избирательных участков

Отсутствует информация о территории избирательных участков.

4. Непостоянство структуры записи адреса избирательной комиссии Встречаются разные вариации записи адреса избирательного участка

• индекс, область, район, населенный пункт, улица (название места голосования), дом
• индекс, область, район, населенный пункт (название места голосования), улица, дом
• индекс, область, район, населенный пункт, улица, дом, название места голосования
• и множество других

Название любого компонента адреса может фигурировать в разных вариантах, содержать опечатки или вообще отсутствовать. В середине адресной строки могут присутствовать неожиданные вставки вида

• Адрес УИК и помещения для голосования:
• адрес УИК
• адрес помещения для голосования

[править] Скрипты

Для получения данных служат следующие скрипты:

• down.py - скачивание исходных данных
• cik.py - парсинг исходных данных в SQLite базу

Исходный код

Для преобразование SQLite -> CSV используются следующие команды:

 sqlite3 -header -csv cik.sqlite "select * from cik_people order by id" > cik_people.csv

 sqlite3 -header -csv cik.sqlite "select * from cik_uik order by id" > cik_uik.csv

 sqlite3 -header -csv cik.sqlite "select * from cik_people_reserve order by id" > cik_people_reserve.csv

[править] Примеры использования

• Скачать данные об адресах и составах избирательных комиссий Башкортостана

python down.py --region=bashkortostan

• Скачать данные об адресах, составах избирательных комиссий и резервов участковых избирательных комиссий Орловской области

python down.py --with-reserve --region=orel

Список используемых наименований субъектов РФ можно посмотреть в файле cik.py

[править] Примеры SQL запросов

NB В программе sqlite по умолчанию не включена поддержка сопоставления кириллических символов. По умолчанию не работают функции перевода строки в нижний и верхний регистр и не работает регистронезависимый поиск. Как исправить этот недостаток описано ниже.

Запрос к базе данных выглядит следующим образом

sqlite3 -header -csv cik.sqlite "sql запрос" > result.csv

Примеры простых sql запросов:

• Выгрузить из SQLite базы списочный состав всех избирательных комиссий Москвы с указанием названий комиссий

SELECT
   cik_uik.name,
   cik_people.* 
FROM
   cik_people 
   INNER JOIN
      cik_uik 
      ON cik_people.ik_id = cik_uik.id 
WHERE
   cik_uik.region = 'moscow_city'

• Выгрузить из SQLite базы списочный состав всех участковых избирательных комиссий Московской области с указанием названий самой комиссии и вышестоящей

SELECT
   cik_uik2.name AS "parent_name",
   cik_uik1.region,
   cik_uik1.url,
   cik_uik1.name,
   cik_people.fio,
   cik_people.post,
   cik_people.party 
FROM
   cik_uik AS cik_uik1 
   INNER JOIN
      cik_uik AS cik_uik2 
      ON cik_uik1.parent_id = cik_uik2.id 
   JOIN
      cik_people 
      ON cik_people.ik_id = cik_uik1.id 
WHERE
   cik_uik1.type_ik = 'uik' 
   AND cik_uik1.region = 'moscow_reg'

• Выгрузить из SQLite базы адреса всех участковых комиссий Ярославской области

SELECT
   cik_uik.* 
FROM
   cik_uik 
WHERE
   cik_uik.region = 'yaroslavl' 
   AND cik_uik.type_ik = 'uik' 
   AND cik_uik.iz_id > 0

• Выгрузить из SQLite состав резервов участковых комиссий Тамбовской области

SELECT
   cik_uik.name,
   cik_people_reserve.* 
FROM
   cik_people_reserve 
   INNER JOIN
      cik_uik 
      ON cik_people_reserve.ik_id = cik_uik.id 
WHERE
   cik_uik.region = 'tambov'

• Выгрузить из SQLite состав резервов участковых комиссий Московской области с указанием названия самой комиссии, а также вышестоящей

SELECT
   cik_uik2.name AS "parent_name",
   cik_uik1.region,
   cik_uik1.url,
   cik_uik1.name,
   cik_people_reserve.fio,
   cik_people_reserve.post,
   cik_people_reserve.party 
FROM
   cik_uik AS cik_uik1 
   LEFT OUTER JOIN
      cik_uik AS cik_uik2 
      ON cik_uik1.parent_id = cik_uik2.id 
   JOIN
      cik_people_reserve 
      ON cik_people_reserve.ik_id = cik_uik1.id 
WHERE
   cik_uik1.region = 'moscow_reg'

• Найти данные по УИКам Брянского района Брянской области

Сначала с помощью запроса

SELECT
   cik_uik.name,
   cik_uik.id 
FROM
   cik_uik 
WHERE
   type_ik = 'ik' 
   AND cik_uik.name LIKE '%Брянск%'

найдем id комиссии Брянской области. Результатом выполнения этой команды будет следующий текст

Избирательная комиссия Брянской области|91193

Так как ТИКи Брянской области имеют parent_id=91193, то их находим командой

SELECT
   cik_uik.name,
   cik_uik.id 
FROM
   cik_uik 
WHERE
   parent_id = '91193' 
   AND cik_uik.name LIKE '%Брянск%'

Из вывода этой команды

name|id
Брянск, Бежицкая|91194
Брянск, Володарская|91258
Брянск, Советская|91288
Брянск, Фокинская|91338
Брянская|91461

находим, что УИКи Брянского района Брянской области имеют parent_id=91461. Используя этот результат несложно выбрать нужную информацию по этим УИКам.

NB. Это лишь пример работы со срезом от 01.01.2019. В срезах за другие даты значения id могут отличаться.

• Если известно название вышестоящей комиссии, то составы непосредственно нижестоящих комиссий можно выгрузить одной командой. Например, следующая команда выдает составы всех УИК района Южное Тушино Города Москвы

SELECT
   cik_uik.parent_id,
   cik_uik.name,
   cik_people.* 
FROM
   cik_people 
   INNER JOIN
      cik_uik 
      ON cik_people.ik_id = cik_uik.id 
WHERE
   cik_uik.parent_id IN 
   (
      SELECT
         cik_uik.id 
      FROM
         cik_uik 
      WHERE
         cik_uik.name LIKE '%Южное Тушино%'
   )

• Поиск члена комиссии по фамилии по всем комиссиям

SELECT
   cik_uik.name,
   cik_uik.address,
   cik_people.* 
FROM
   cik_people 
   INNER JOIN
      cik_uik 
      ON cik_people.ik_id = cik_uik.id 
WHERE
   cik_people.fio LIKE '%Иванов Иван%'

[править] Подключение регистронезависимого поиска для sqlite

По умолчанию sqlite умеет переводить символы в верхний или нижний регистр и искать строки без учета регистра только для ASCII символов. Для поддержки этих операций для символов вне этого диапазона необходимо подключить специальное расширение. Для этого

• Необходимо скачать исходные тексты sqlite.

• Распаковать архив с исходными текстами и перейти в директорию ext/icu/.

• Скомпилировать расширение icu.

• Регистронезависимый поиск по базе данных осуществляется командой

sqlite3 -header -csv cik.sqlite '.load /PATH/TO/ICU/EXTENSION/libSqliteIcu.so sqlite3_icu_init' "sql запрос" > result.csv

[править] Альтернативные машиночитаемые источники данных

• УИК ГЕО – данные об адресах участковых избирательных комиссий и географических координат помещений для голосования.
• WikiУИКи - данные об избирательных комиссиях и их составах.
• Мосгоризбирком