Скрипты сборки и агрегации (простые), включая конвертацию в форматы CSV и JSON lines, которые я для простоты выкладывать не стал: https://gist.github.com/388d74776714f7b9e590a8b39094bf93
Gist
Aggregate multiple CVK scrapes into precinct histories
Aggregate multiple CVK scrapes into precinct histories - aggregate.py
Наконец, последняя сырая выгрузка из канала (соответствующая файлу
20190406T1151Z.tsv в архиве) на случай, если кому-то нужно сверить обработку со старым форматом:Shameless plug: сегодня файлы в канал выгружает https://github.com/alexshpilkin/hattifnatt — синхронизация каталога с телеграм-каналом.
GitHub
GitHub - alexshpilkin/hattifnatt: Push directory to Telegram channel
Push directory to Telegram channel. Contribute to alexshpilkin/hattifnatt development by creating an account on GitHub.
Утеряны изменения данных о предварительной явке с 3:19 UTC (6:19 MSK) до 13:19 UTC (16:19 MSK) из-за того, что программа скачивания не справилась с изменившимся форматом. За это время на девятнадцати ТВО (№№ 31, 50, 65, 86, 88, 90, 96, 113, 153, 155, 163, 167, 178, 179, 190, 192, 200, 206) изменились данные о явке на 20:00 в пределах ±0.05%. Сейчас скачивание работает штатно.
Добавил к каждой выгрузке результатов ссылку на сравнение с предыдущей (в обозначениях unidiff). Теперь за тем, как следующие несколько дней ничего не будет меняться, можно следить не выходя из браузера =)
От появления ссылки в канале до готовности страницы может проходить около минуты. Если вы видите ошибку 404, подождите примерно минуту и перезагрузите страницу. (Если один раз так сделать не помогает или ссылок вообще нет, значит, у нас действительно что-то сломалось.)
🎉 ЦИК Украины опубликовала итоговый протокол второго тура: https://cvk.gov.ua/info/protokol_zvo_26.04.2019.pdf.
На этом наша трансляция закончена. Как всегда, исходные файлы будут удалены из канала и выложены архивом в дополнение к сводным таблицам.
На этом наша трансляция закончена. Как всегда, исходные файлы будут удалены из канала и выложены архивом в дополнение к сводным таблицам.
Все данные канала по второму туру выборов одним архивом в формате TSV (UTF-8, CRLF); обратите внимание, что там есть несколько битых файлов:
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
На прошедшем Дне открытых данных Юлия Духовнова рассказала о планах ФНС России по публикации в апреле открытых данных налоговой статистики в муниципальном разрезе.
В конце апреля реестр открытых данных ФНС России действительно был дополнен и теперь можно использовать данные о:
- налоговой базе и структуре начислений по налогу, уплачиваемому в связи с применением упрощенной системы налогообложения в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому сельскохозяйственному налогу в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому налогу на вмененный доход для отдельных видов деятельности в разрезе муниципальных образований.
Единственное, на мой взгляд, пока не хватает привязки муниципалитетов к регионам, указания наименований муниципалитетов в едином формате и в датасетах отдельных регионов не совсем корректна структура csv. Думаю, что в следующих версиях наборов эти недочеты будут устранены.
А вообще получается странная ситуация: региональных бюджетов на портале "Электронного бюджета" все еще нет (хотя должны были быть с 1 января 2018 года, а с 1 января 2020 года должны быть уже и муниципальные бюджеты, но будут ли?), а муниципальная налоговая статистика уже есть. 🙂
https://www.nalog.ru/opendata/
В конце апреля реестр открытых данных ФНС России действительно был дополнен и теперь можно использовать данные о:
- налоговой базе и структуре начислений по налогу, уплачиваемому в связи с применением упрощенной системы налогообложения в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому сельскохозяйственному налогу в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому налогу на вмененный доход для отдельных видов деятельности в разрезе муниципальных образований.
Единственное, на мой взгляд, пока не хватает привязки муниципалитетов к регионам, указания наименований муниципалитетов в едином формате и в датасетах отдельных регионов не совсем корректна структура csv. Думаю, что в следующих версиях наборов эти недочеты будут устранены.
А вообще получается странная ситуация: региональных бюджетов на портале "Электронного бюджета" все еще нет (хотя должны были быть с 1 января 2018 года, а с 1 января 2020 года должны быть уже и муниципальные бюджеты, но будут ли?), а муниципальная налоговая статистика уже есть. 🙂
https://www.nalog.ru/opendata/
MGD_2019_candidates.xlsx
33.2 KB
Понемногу готовимся к выборам в Мосгордуму.
Список кандидатов с izbirkom.ru на сегодняшний день
Список кандидатов с izbirkom.ru на сегодняшний день
Ссылка на обновляемый (примерно раз в день) файл
https://drive.google.com/file/d/1Q3QMVVAMC9Jje7-JWiUUy63teQNExLlr/view
https://drive.google.com/file/d/1Q3QMVVAMC9Jje7-JWiUUy63teQNExLlr/view
Forwarded from cikrf_news
Утвержден перечень цифровых избирательных участков
http://cikrf.ru/news/cec/43488/
3 июля 2019 года ЦИК России утвердила [Перечень цифровых избирательных
участков](http://cikrf.ru/analog/ediny-den-golosovaniya-2019/tsifrovye-
izbiratelnye-uchastki/golosovanie-na-tsifrovykh-izbiratelnykh-
uchastkakh/cuik.php), которые будут организованы на выборах 8 сентября 2019
года в Москве.
На цифровых участках смогут проголосовать жители регионов России, где в единый
день голосования пройдут дополнительные выборы депутатов Государственной Думы
седьмого созыва и выборы высших должнос
http://cikrf.ru/news/cec/43488/
3 июля 2019 года ЦИК России утвердила [Перечень цифровых избирательных
участков](http://cikrf.ru/analog/ediny-den-golosovaniya-2019/tsifrovye-
izbiratelnye-uchastki/golosovanie-na-tsifrovykh-izbiratelnykh-
uchastkakh/cuik.php), которые будут организованы на выборах 8 сентября 2019
года в Москве.
На цифровых участках смогут проголосовать жители регионов России, где в единый
день голосования пройдут дополнительные выборы депутатов Государственной Думы
седьмого созыва и выборы высших должнос
Fin_reports_1.zip
65.7 MB
Первые финансовые отчеты по округам, формат: *_v(версия)_(дата).pdf
MGD_2019_candidates_0713.xlsx
59.2 KB
Статус кандидатов на 13.07
На data.mos.ru появился свежий набор данных по избирательным участкам Москвы. В JSON-версии есть приписанные дома.
https://data.mos.ru/opendata/961/passport?versionNumber=5&releaseNumber=2
https://data.mos.ru/opendata/961/passport?versionNumber=5&releaseNumber=2
mos.ru
Избирательные участки города Москвы
Избирательные участки города Москвы
precincts_geocoded.zip
13.2 MB
а вот этот же набор с приделанными геоданными домов (полигоны) из реестра недвижимости Москвы. В многоэтажных районах геолоцировано подавляющее большинство домов (>98%), в одноэтажной застройке около 60%.