То же самое в формате TSV (UTF-8, CRLF) — все данные, относящиеся к заданному участку (одной и той же паре «ТВО №», «№ ВД»), идут подряд:
aggregate.log
27.7 KB
Лог агрегации (UTF-8, CRLF) с отметками о странностях в выгрузках (судя по всему, некоторые выгрузки заставали сайт в процессе обновления).
Скрипты сборки и агрегации (простые), включая конвертацию в форматы CSV и JSON lines, которые я для простоты выкладывать не стал: https://gist.github.com/388d74776714f7b9e590a8b39094bf93
Gist
Aggregate multiple CVK scrapes into precinct histories
Aggregate multiple CVK scrapes into precinct histories - aggregate.py
Наконец, последняя сырая выгрузка из канала (соответствующая файлу
20190406T1151Z.tsv в архиве) на случай, если кому-то нужно сверить обработку со старым форматом:Shameless plug: сегодня файлы в канал выгружает https://github.com/alexshpilkin/hattifnatt — синхронизация каталога с телеграм-каналом.
GitHub
GitHub - alexshpilkin/hattifnatt: Push directory to Telegram channel
Push directory to Telegram channel. Contribute to alexshpilkin/hattifnatt development by creating an account on GitHub.
Утеряны изменения данных о предварительной явке с 3:19 UTC (6:19 MSK) до 13:19 UTC (16:19 MSK) из-за того, что программа скачивания не справилась с изменившимся форматом. За это время на девятнадцати ТВО (№№ 31, 50, 65, 86, 88, 90, 96, 113, 153, 155, 163, 167, 178, 179, 190, 192, 200, 206) изменились данные о явке на 20:00 в пределах ±0.05%. Сейчас скачивание работает штатно.
Добавил к каждой выгрузке результатов ссылку на сравнение с предыдущей (в обозначениях unidiff). Теперь за тем, как следующие несколько дней ничего не будет меняться, можно следить не выходя из браузера =)
От появления ссылки в канале до готовности страницы может проходить около минуты. Если вы видите ошибку 404, подождите примерно минуту и перезагрузите страницу. (Если один раз так сделать не помогает или ссылок вообще нет, значит, у нас действительно что-то сломалось.)
🎉 ЦИК Украины опубликовала итоговый протокол второго тура: https://cvk.gov.ua/info/protokol_zvo_26.04.2019.pdf.
На этом наша трансляция закончена. Как всегда, исходные файлы будут удалены из канала и выложены архивом в дополнение к сводным таблицам.
На этом наша трансляция закончена. Как всегда, исходные файлы будут удалены из канала и выложены архивом в дополнение к сводным таблицам.
Все данные канала по второму туру выборов одним архивом в формате TSV (UTF-8, CRLF); обратите внимание, что там есть несколько битых файлов:
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
На прошедшем Дне открытых данных Юлия Духовнова рассказала о планах ФНС России по публикации в апреле открытых данных налоговой статистики в муниципальном разрезе.
В конце апреля реестр открытых данных ФНС России действительно был дополнен и теперь можно использовать данные о:
- налоговой базе и структуре начислений по налогу, уплачиваемому в связи с применением упрощенной системы налогообложения в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому сельскохозяйственному налогу в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому налогу на вмененный доход для отдельных видов деятельности в разрезе муниципальных образований.
Единственное, на мой взгляд, пока не хватает привязки муниципалитетов к регионам, указания наименований муниципалитетов в едином формате и в датасетах отдельных регионов не совсем корректна структура csv. Думаю, что в следующих версиях наборов эти недочеты будут устранены.
А вообще получается странная ситуация: региональных бюджетов на портале "Электронного бюджета" все еще нет (хотя должны были быть с 1 января 2018 года, а с 1 января 2020 года должны быть уже и муниципальные бюджеты, но будут ли?), а муниципальная налоговая статистика уже есть. 🙂
https://www.nalog.ru/opendata/
В конце апреля реестр открытых данных ФНС России действительно был дополнен и теперь можно использовать данные о:
- налоговой базе и структуре начислений по налогу, уплачиваемому в связи с применением упрощенной системы налогообложения в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому сельскохозяйственному налогу в разрезе муниципальных образований;
- налоговой базе и структуре начислений по единому налогу на вмененный доход для отдельных видов деятельности в разрезе муниципальных образований.
Единственное, на мой взгляд, пока не хватает привязки муниципалитетов к регионам, указания наименований муниципалитетов в едином формате и в датасетах отдельных регионов не совсем корректна структура csv. Думаю, что в следующих версиях наборов эти недочеты будут устранены.
А вообще получается странная ситуация: региональных бюджетов на портале "Электронного бюджета" все еще нет (хотя должны были быть с 1 января 2018 года, а с 1 января 2020 года должны быть уже и муниципальные бюджеты, но будут ли?), а муниципальная налоговая статистика уже есть. 🙂
https://www.nalog.ru/opendata/
MGD_2019_candidates.xlsx
33.2 KB
Понемногу готовимся к выборам в Мосгордуму.
Список кандидатов с izbirkom.ru на сегодняшний день
Список кандидатов с izbirkom.ru на сегодняшний день
Ссылка на обновляемый (примерно раз в день) файл
https://drive.google.com/file/d/1Q3QMVVAMC9Jje7-JWiUUy63teQNExLlr/view
https://drive.google.com/file/d/1Q3QMVVAMC9Jje7-JWiUUy63teQNExLlr/view