Ivan Begtin
8.1K subscribers
2.02K photos
3 videos
102 files
4.75K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts [email protected]
Download Telegram
Для всех кто помнит про бот для телеграма по ретрансляции новостей в каналы [1], у меня, к сожалению, с новой работой остаётся очень мало времени на его поддержку, поэтому я его код полностью публикую на github'е [2].

Пишите там в issues если найдёте ошибки или смело их исправляйте. Клонируйте бот и используйте в личных задачах как Вам удобно.

Напомню что этот бот умеет выгружать новости из RSS каналов и веб-сайтов где есть страницы с новостями и отправлять их в телеграм каналы. Очень удобно для тех кому надо транслировать новости из своего сайта в телеграм канал автоматом или если кому-то надо настроить мониторинг новостей по теме.

С помощью этого бота работает канал Инфокультуры @infoculture и Правительственный дайджест @govdigest и новостной канал о Московском патриархате @mospatriarhia о котором мало кто знает.

Ссылки:
[1] https://begtin.tech/feedbot/
[2] https://github.com/datacoon/feedrebot

#news #opensource
В СМИ уже идут публикации на основе доклада по открытости который готовили мы в Инфокультуре в Центре перспективных управленческих решений, а теперь и в Счетной палате с момента моего туда выхода. Прочитать о докладе можно в РБК [1], в Российской газете [2] и в Коммерсанте [3]. А также Известия [4], телеканал 360 [5], Вести [6] и ТАСС [7]

В ближайшее время само исследование будет общедоступно для всех, а также о нём будет разговор 8-го июня на ПМЭФе [8]. Все подробности я уже буду рассказывать после ПМЭФа:) Сейчас лишь упомяну что этот доклад лишь начало работы, а её ещё предстоит много. Открытость находится в приоритете работы Счетной палаты и тем ФОИВам которые решили на неё "подзабить" за последние годы ещё не поздно исправить эту ошибку.

Ссылки:
[1] https://www.rbc.ru/economics/05/06/2019/5cf65bac9a7947c873d7fa90?from=from_main
[2] https://rg.ru/2019/06/05/schetnaia-palata-nazvala-samoe-zakrytoe-ministerstvo-rossii.html
[3] https://www.kommersant.ru/doc/3991634
[4] https://iz.ru/885558/2019-06-05/schetnaia-palata-nazvala-samoe-zakrytoe-ministerstvo-rossii
[5] https://360tv.ru/news/vlast/schetnaja-palata-nazvala-samye-otkrytye-ministerstva-rossii/
[6] https://www.vesti.ru/doc.html?id=3154726
[7] https://tass.ru/ekonomika/6508493
[8] https://www.forumspb.com/programme/71093/
#opengov #opendata #government
А вот и сам анонс доклада по открытости на сайте СП РФ [1] и текст доклада по ссылке [2]

Ссылки:
[1] https://audit.gov.ru/press_center/news/37248
[2] https://audit.gov.ru/about/document/%D0%9E%D1%82%D0%BA%D1%80%D1%8B%D1%82%D0%BE%D1%81%D1%82%D1%8C-%D0%B4%D0%BE%D0%BA%D0%BB%D0%B0%D0%B4.pdf

#opendata #opengov
Есть много оснований не считать эту новость хорошей, так как концепция весьма и весьма сыра. И в ней ничего нет про открытые данные
Утверждена Концепция создания и функционирования национальной системы управления данными
https://government.ru/docs/36940/

Распоряжение от 3 июня 2019 года №1189-р, постановление от 3 июня 2019 года
№710. Создание и функционирование национальной системы управления данными
приведёт к повышению эффективности принятия управленческих решений на основе
использования государственных информационных ресурсов в целях улучшения
качества и доступности для граждан государственных, муниципальных и
коммерческих услуг.
На ПМЭФ прошла сессия по открытости где мы: Счетная палата, Инфокультура и ЦПУР презентовали доклад по открытости.
Анонс доклада по открытости на сайте СП РФ [1] и текст доклада по ссылке [2], а на сайте ПМЭФа можно увидеть запись секции [3].

Много важных тем есть и в докладе и в обсуждалось на ПМЭФ. Важно то что открытость не является синонимом эффективности. Открытость данных должна доходить до муниципального уровня и ещё многое другое. Я чуть позже напишу подробнее, пока очень рекомендую прочитать доклад и посмотреть запись сессии.

Ссылки:
[1] https://audit.gov.ru/press_center/news/37248
[2] https://audit.gov.ru/about/document/%D0%9E%D1%82%D0%BA%D1%80%D1%8B%D1%82%D0%BE%D1%81%D1%82%D1%8C-%D0%B4%D0%BE%D0%BA%D0%BB%D0%B0%D0%B4.pdf
[3] https://www.forumspb.com/programme/71093/#broadcast

#opendata #opengov #sprf
Open Budgets India [1] общественный проект в Индии собирающий данные по бюджетам со всех штатов в Индии и от федерального пр-ва. Существует в формате визуализаций и портала открытых данных.

Это ныне какая-то устойчивая форма проектов на открытых данных когда создатели одновременно делают продукт для массовых потребителей и не забывают выложить все данные для аналитиков/программистов.

Ссылки:
[1] https://openbudgetsindia.org/

#opendata #opengov #openbudgets #budgets #india
Не секрет что даже в самых развитых странах оцифровка и систематизация законов, законопроектной деятельности идёт очень тяжело. LegalTech стартапы лучше работают в корпоративном мире, но уже там где есть их применение к решениям судов, законодателей и не только - становится всё непросто. А может стать и ещё сложнее

Во Франции рассматривают законопроект о запрете на разработку систем предсказания судебных решений [1]. В переводе на русский это звучит как:
"Идентификационные данные магистратов и сотрудников судебных органов не могут использоваться повторно с целью или в целях оценки, анализа, сравнения или прогнозирования их фактической или предполагаемой профессиональной деятельности.’

Всё это вкодировано в статью 33 [2] закона о реформе юстиции который рассматривается парламентом Франции.

В России где почти 99% всех приговоров обвинительные это не столь критично, но во Франции есть стартапы такие как Predictice [3] которые предполагают возможность формирования аналитики по конкретным судьям.

С введением ответственности в 5 лет тюрьмы все кто такую аналитику предлагают на рынке немедленно свернут свою деятельность.

Почему это важно? Можно сказать что это первый прецедент запрета на интерпретацию информации из открытых источников. И прецедент довольно жёсткий. Зная склонность российских законодателей к сбору наиболее жёстких практик по всему миру - остаётся лишь ждать когда подобные ограничения предложат и в России и к чему они будут применены. У меня есть несколько идей, но озвучивать их я не хочу дабы не давать законодателям лишней пищи для размышления.

Ссылки:
[1] https://www.artificiallawyer.com/2019/06/04/france-bans-judge-analytics-5-years-in-prison-for-rule-breakers/
[2] https://www.legifrance.gouv.fr/eli/loi/2019/3/23/2019-222/jo/article_33
[3] https://predictice.com/

#data #dataanalytics #opendata
На самом деле гораздо более чем 5 лет в системе закупок нет положительных изменений. Но если рассказывать всё подробно - будет много про политику. А в этом исследовании есть ряд важных цифр
Уже пять лет в системе закупок нет значимых положительных изменений – Счетная палата представляет мониторинг за 2018 г.
https://audit.gov.ru/press_center/news/37416

Уже пять лет в системе закупок нет значимых положительных изменений – Счетная
палата представляет мониторинг за 2018 г.
New York Times выложили в открытый доступ материалы по обучению журналистов дата-журналистике [1], со всеми материалами и датасетами [2]. Неплохой курс/тренинг, очень практичный, про работу с таблицами, очистку данных, брейншторм на данных и так далее.

Такой гайд был бы хорош и на русском языке. Благо материалов предостаточно.

Ссылки:
[1] https://www.niemanlab.org/2019/06/the-new-york-times-has-a-course-to-teach-its-reporters-data-skills-and-now-theyve-open-sourced-it/
[2] https://drive.google.com/drive/u/0/folders/1ZS57_40tWuIB7tV4APVMmTZ-5PXDwX9w

#opendata #ddj #data #datajournalism
Вся аналитика на юр. лицах и госзакупках летит в тар тарары. Напишу позже подробнее
Правительство закроет доступ к сведениям в ЕГРЮЛ

Правительство РФ ограничило доступ к сведениям, содержащимся в ЕГРЮЛ по некоторым компаниям. Соответствующее постановление от 06.06.2019 № 729 опубликовано на Официальном интернет-портале правовой информации.

Ограничения будут действовать в отношении компаний, которые:

- попали под зарубежные санкции;
- являются кредитной организацией, участвующей в реализации гособоронзаказа;
- находятся на территории Крыма или Севастополя.

Согласно постановлению, о таких фирмах нельзя будет узнать информацию:

- об учредителях (участниках);
- о правопреемниках;
- о руководителе (скроют его Ф.И.О. и должность, паспортные данные и ИНН);
- о том, что юрлицо действует на основании типового устава;
- о наличии корпоративного договора, определяющего объем правомочий участников общества;
- о филиалах и представительствах, если у компании есть подразделения в Крыму или Севастополе.

Постановление № 729 вступит в силу с 18 июня 2019 года.

Источник: business.ru
Тем временем в Италии приняли требования к обязательному использованию и раскрытию открытого кода в органа власти [1], о чём команда Team Digitale пишет в своём блоге [2]. Требования чётко изложены, хорошо написаны и уже действуют. Я через некоторое время постараюсь перевести их на русский язык. Немало кода, кстати, уже опубликовано [3]



P.S. Я также ищу человека который бы на регулярной основе переводил бы такие тексты на русский язык. В основном с английского.


Ссылки:
[1] https://docs.italia.it/italia/developers-italia/gl-acquisition-and-reuse-software-for-pa-docs/en/stabile/
[2] https://medium.com/team-per-la-trasformazione-digitale/open-source-guidelines-for-acquisition-reuse-software-in-italian-public-administration-d6d5997d3e51
[3] https://developers.italia.it/it/software/

#opengov #opensource
Тем временем, открытые данные, это далеко не только особенность демократических стран. В Объединённых арабских эмиратах их Министерство финансов публикует бюджеты в формате открытых данных [1] и предоставляет соответствующий раздел на своём сайте. Портал открытых данных есть и у Саудовской Аравии [2], множество их существует в Китае [3], [4], [5], [6], [7].

Отчего же Россия не забывает импортировать из Китая идеологию Интернет-цензуры, но забывает про открытые данные?

Ссылки:
[1] https://www.mof.gov.ae/en/opendata/Pages/default.aspx
[2] https://www.data.gov.sa
[3] https://opendata.mofcom.gov.cn/
[4] https://opendata.changzhou.gov.cn/
[5] https://opendata.taizhou.gov.cn/odweb/
[6] https://data.bengbu.gov.cn/
[7] https://data.hainan.gov.cn/

#opendata #uae #china
А вот и новости о том что я делаю
Счетная палата открывает исходный код своих новых программ
https://audit.gov.ru/press_center/news/37677

Счетная палата открывает исходный код своих новых программ
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
Счетная палата - первый федеральный госорган, открывший исходный код своих проектов.

В репозитории кода (code.ach.gov.ru/public) есть блок «Образовательные ресурсы», исторические архивные данные (например, архив бюллетеня Счетной палаты с 1999 по 2010 год, которого нет на официальном сайте СП РФ), код сбора и обработки данных из государственных информационных систем. В дальнейшем планируется опубликовать дизайн-макет, код аналитических инструментов и многое другое. Информация будет обновляться не реже, чем раз в месяц, а далее на постоянной основе.

Также, согласно официального пресс-релиза, в Счетной палате РФ создается «озеро данных» и аналитические системы на основе Open Source продуктов.

Еще один шаг на пути к открытости Счетной палаты и, надеюсь, к получению полномочий по развитию и контролю над открытостью.

Официальный пресс-релиз доступен по ссылке: https://audit.gov.ru/press_center/news/37677
К тому о чём я писал ранее про открытый код Счётной палаты [1], важно дополнить что это действительно большой шаг. Открывать код для органов власти страшно потому что каждый из них под пристальным вниманием СМИ и страх облажаться неслабый. Для корпораций он тоже есть, хотя и не так остро стоит.

А я напомню что я и моя команда в Инфокультуре давно открываем исходный код наших проектов. На Github'е в 3-х репозиториях:
- Infoculture [2] - репозитории Инфокультуры
- DataCoon [3] - репозитории нашей группы Data Raccoon которая занималась аналитикой на заказ
- ivbeg [4] - мои личные репозитории кода

Почти весь код так или иначе связан с данными, поэтому часто данными же сопровождается. На вопрос о том зачем это нужно? С какой бы стати вообще это делать? Причин несколько
1. Привлечение разработчиков понимающих с чем они столкнуться в работе заранее.
2. Исправление кода, многие пишут о неточностях и ошибках и за что им большое спасибо
3. Обучение. В счётной палате идёт обучение сотрудников работе с данными, в Инфокультуре мы регулярно проводим мероприятия, встречи и хакатоны.


Ссылки:
[1] https://code.ach.gov.ru/public
[2] https://github.com/infoculture
[3] https://github.com/datacoon
[4] https://github.com/ivbeg

#opendata #opensource
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
Если раньше данные в России были открытыми, то теперь они становятся платными.

За предоставление информации из государственного информационного ресурса бухгалтерской отчетности нужно будет с 1 января 2020 года платить 200 тыс. руб.

Продажа ЕГРЮЛ и ЕГРИП всегда вызывала вопросы, а продажа статистики бух. отчётности - тем более.

https://www.garant.ru/news/1279606/