Ivan Begtin
7.99K subscribers
1.78K photos
3 videos
101 files
4.49K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts [email protected]
Download Telegram
Вышла моя колонка в Форбс о том почему в России недоступны данные о преступлениях и что нам с этим делать.
https://www.forbes.ru/mneniya/siloviki/327227-pochemu-v-rossii-nedostupna-informatsiya-o-prestupleniyakh

Текст почти в формате лонгрида и, кстати, я уже подумываю не сделать ли мне такой лонгрид на базе тильды. Нельзя же быть сапожником без сапог, учить дата журналистике и не делать проекты в этой теме хотя бы раз в месяц.

#opendata #opengov #openpolice #открытаяполиция
Вчера был день колонок про открытые данные. Вторая статья вышла в РБК о том почему не получится закрыть данные госорганов - https://www.rbc.ru/opinions/politics/30/08/2016/57c542999a7947542d3df910

Пока мало кто обратил внимание на раздел этой статьи связанный с хартией открытых данных подписанной Россией в 2013 году (Владимир Путин подписал её на встрече Большой Восьмёрки). Очень мало что из положений хартии выполнено в России. К счастью и ничего не закрыто.

Впрочем, подробнее именно в статье.

#opendata #opengov
Для тех кто любит Python, не очень любит, но вынужден работать с SQL и любит NoSQL формат работы с данными, для них подборка полезных инструментов:
- datasets: databases for lazy people https://dataset.readthedocs.io/en/latest/ инструмент для доступа к базам данных с запросами не через SQL, а в стиле MongoDB - словарями в Python
- Records: SQL for Humans https://github.com/kennethreitz/records аналогично datasets, удобная библиотека для доступа к SQL без знания SQL
- Tablib: Pythonic Tabular Datasets - https://docs.python-tablib.org/en/latest/ как работать с данными и делать наборы без баз данных.
- CsvKit https://github.com/wireservice/csvkit позволяет вытворять всякое с CSV файлами
- SmartCSV https://github.com/santiagobasulto/smartcsv умные разбиратель самых разных CSV файлов
- Docx2CSV https://github.com/ivbeg/docx2csv простая утилита извлечения таблиц из DOCX файлов

Ну а для тех кто любит Go, любит SQL и не любит NoSQL ещё есть:
- TextQL https://github.com/dinedal/textql позволяющий исполнять SQL против CSV файлов
- Q https://github.com/harelba/q аналогичный движок всё таки на Python, но давно не обновляемый

Для тех кому надо быстро обмениваться большими файлами. Есть dat - https://github.com/datproject/dat движок для обмена файлами с данными
#opendata #data #datascience
Нескольких участников хакатонов мы недавно привели к Алексею Кудрину рассказать о том что такое открытые данные [1], как создаются новые проекты и о том как важна открытость для роста общественной активности. У этого уже есть первые результаты - в программу Университета КГИ [2] включена тема открытых данных [3] и она же будет на Зимней школе Университета КГИ в этом году

Подробнее новости университета КГИ можно также узнать в телеграме Университета [4]

Не буду скрывать что в мои планы на 2016 и 2017 годы входит убеждение всех существующих грантодающих фондов и общественных организаций по поддержке проектов на открытых данных или же открытые данные создающие.

Ссылки:
[1] https://akudrin.ru/news/vstrecha-s-razrabotchikami-proektov-ispolzuyuschih-otkrytye-dannye
[2] https://komitetgi.ru/projects/2078/
[3] https://komitetgi.ru/news/news/2948/
[4] https://telegram.me/univerkgi

#opendata #opengov
Я просто никак не могу удержаться и не напомнить что мы с вашей помощью мы смогли собрать больше половины средств (75 556 рублей) на печать брошюры "Понятная полиция". За что, конечно, огромное спасибо всем кто пожертвовал.

Более того: мы нашли возможность увеличить тираж и за 120 000 рублей напечатать в 4 раза больше брошюр – не 250, как планировали, а 1000 экземпляров!

Запрос на брошюры действительно есть (у нас просят сразу по несколько сотен книжек).

Вы по-прежнему можете нам помочь:
- отправив денежное пожертвование через planeta.ru (https://planeta.ru/campaigns/openpolice)
- стать на один час волонтёром и помочь нам отправить готовые брошюры получателям (напишите об этом нам [email protected])
- рассказать знакомым НКО или активистам о нашей брошюре (если они хотят её получить),
- просто сделать репост этой записи.

До окончания кампании чуть менее 5 дней, поэтому лучше прямо сейчас перейти по ссылке и сделать пожертвование.

Это один из немногих нетехнологических, но важных проектов которыми занимается АНО «Инфокультура». В определённый момент мы поняли что понятность правоохранительных органов не менее важна чем их открытость.

#openpolice #opengov
Открытое правительство анонсировало курс по открытым данным [1] который полностью проводится онлайн на специальном сайте [2] и включает множество лекций о том как открытые данные устроены.

Этот курс, не является открытым - он требует регистрации, однако доступен под лицензией Creative Commons - Share Alike, правда там же висит и копирайт самого Открытого правительства. В общем, смешение смыслов.

Те кто зарегистрируются, Вы сразу увидите с первого же модуля что и я (Иван Бегтин) принимал участие в записи этого курса. Он начинался ещё год назад и весь этот год авторы его доделывали, а я лично и остальные лекторы были в легком неведении что же получится. И до сих пор я не то чтобы могу сказать получилось ли то что ожидалось или нет.

К сожалению, этот курс не авторский. У него де-факто нет научного руководителя, однако несмотря на первый блин комом я всё же надеюсь что многие из Вас найдут в нём что-то интересное для себя. И, конечно, не обращайте внимание что там сразу при заходе на сайте начинает работать видео. Открытое правительство никого из нас лекторов об этом не предупреждало.

И, да, я напоминаю про курс по открытым данным в рамках Университета КГИ [3] за который уже я несу полную ответственность и в рамках зимней школы КГИ будут лекции и мероприятия по открытым данным.

Если у Вас есть идеи и практические предложения того как, на каких площадках можно организовать курсы и иные просветительские мероприятия - пишите мне на [email protected]

Ссылки:
[1] https://open.gov.ru/events/5515416/
[2] https://odc.open.gov.ru/
[3] https://komitetgi.ru/news/news/2948/

#opendata #opengov
Продолжаю обзоры открытых данных создаваемых не-государством. На сей раз данные о инфраструктуре Интернета.

M-Lab (Measurement Lab) [1] - это консорциум посвящённый измерению Интернета. Он включает:
- New America’s Open Technology Institute (OTI)
- PlanetLab Consortium
- Google Inc.
- и множество академических инститов.

Проект создан для непрерывного мониторинга за качеством связи в Интернете, публикации данных о текущем состоянии этой связи и визуализации этих данных наглядно.

В рамках проекта раскрываются огромные объёмы данных [2] хранящиеся на Google Storage [3]. Это по несколько гигабайт архивных данных ежедневно.

В M-Lab уже накоплены данные созданы такими инструментами как:
- Glasnost [4] - определение приоритизации или цензуры сетевого трафика
- NDT [5] - инструмент измерения трафика TCP под большой нагрузкой
- Neurobot [6] - инструмент сбора информации о скорости каналов, сетевом нейтралитете и цензуре
- NPAD [7] - инструмент измеряющий проблемы в сетевом пути влияющие на производительность
- OONI [8] - инструмент измерения цензуры, прослушки и манипуляции трафиком
- Paris Traceroute [9] - инструмент картирующий топологию сети
- pathload2 [10] - инструмент для измерения ширины каналов
- ShaperProbe [11] - инструмент определения приоритизации трафика
- SlideStream [12] - инструмент измеряющий состояние TCP трафика и информацию о завершенных TCP соединениях
- mlab-collectd [13] - инструмент накопления статистики с серверов M-Lab

Все материалы публикуются под лицензией CC Zero. Практически весь код M-Lab раскрывается н Github [x]

Ссылки:
[1] https://www.measurementlab.net/about/
[2] https://www.measurementlab.net/data/
[3] https://www.measurementlab.net/data/gcs/
[4] https://console.developers.google.com/storage/browser/m-lab/glasnost/
[5] https://console.developers.google.com/storage/browser/m-lab/ndt/
[6] https://console.developers.google.com/storage/browser/m-lab/neubot/
[7] https://console.developers.google.com/storage/browser/m-lab/npad/
[8] https://console.cloud.google.com/storage/browser/m-lab/ooni/
[9] https://console.cloud.google.com/storage/browser/m-lab/paris-traceroute/
[10] https://console.developers.google.com/storage/browser/m-lab/pathload2/
[11] https://console.cloud.google.com/storage/browser/m-lab/shaperprobe/
[12] https://console.developers.google.com/storage/browser/m-lab/sidestream/
[13] https://console.developers.google.com/storage/browser/m-lab/utilization/
[14] https://github.com/m-lab

#opendata #opengov #internet
Для всех кто не просто интересуется журналистикой данных, но и уже почувствовал в себе амбиции к чему-то большему - появилась программа поддержки медиа стартапов. Лондонский акселератор Founders Factory [1] до 23 сентября принимает заявки от медиа стартапов [2]. Форма заявки доступна по ссылке [3], помните что приём идёт до 23 сентября!

В России, насколько я знаю, пока нет выделенного стартап фонда поддержки медийных стартапов, хотя и таких фондов и инкубаторов явно нехватает. В то же время для медиа стартапов остаётся немало возможностей и в рамках таких фондов как ФРИИ да и других существующих инкубаторов.

Ссылки:
[1] https://foundersfactory.co
[2] https://foundersfactory.co/accelerator/
[3] https://podio.com/webforms/12695852/867095

#opendata #opengov #datajournalism
Blavatnik School of Government и University of Oxford представили новый ежемесячный журнал Oxford Government Review (OGR) [1]. Темой первого выпуска стали вопросы доверия к государству (The Trust Issue) [2].

Создание журнала является продолжением конференции The Challenges in Government (Вызовы в государстве) [3] которая ежегодно проводится в Оксфордском университете и включает высокопоставленных спикеров, лидеров стран и обсуждение текущих вопросов демократии и государственного управления.

В первом выпуске журнала можно обратить внимание на упоминание на направление «Strengthen transparency and accountability» куда попадают инициативы по открытости данных, открытым контрактам (open contracting), open banking и многое другое. Конечно повестка, в основном, под британские особенности и акценты открытости государства.

Ссылки:
[1] https://www.bsg.ox.ac.uk/research/oxford-government-review
[2] https://www.bsg.ox.ac.uk/research/oxford-government-review/1-trust-issue
[3] https://www.bsg.ox.ac.uk/partner/cogc

#opendata #opengov
Ещё одна актуальная задача для волонтёров в том чтобы собрать данные с портала data.gov.ru и сделать библиотеку/инструмент доступа для R или Python. [1]

Задача очень простая. Я бы даже сказал чрезвычайно и должна занять не более пары дней.
Учитывая что data.gov.ru [2] это свалка не меньше чем наш общественный портал hubofdata.ru [3] то надо нам:
1. Собрать оттуда данные
2. Архивировать собранное
3. Анализировать качество и тд.

Нам нужны данные о данных потому что пришла пора понять - насколько/хорошо плохо с ними поставлена работа и что с этим дальше делать.

#opendata #opengov

Ссылки:
[1] https://github.com/infoculture/datatasks/issues/57
[2] https://data.gov.ru
[3] https://hubofdata.ru
В США бюро переписи населения выпустило специальную программу [1] для учителей и школьников старших классов помогающую в освоении статистики на базе предметов уже идущих в школе.

В разделе «Statistics in Schools» [2] на сайте переписи собраны задачи по математике и истории. Очень простые задачи для школьников любого возраста, сразу готовые под то чтобы их распечатать как учебные материалы. Они включают игры, карты, инфографику, инструменты поиска информации, то как объяснить как устроена перепись и многое другое.

Хорошая инициатива в том как готовить специалистов владеющих навыками работы с данными прямо со школы.

Ссылки:
[1] https://www.commerce.gov/news/blog/2016/09/us-census-bureau-unveils-new-statistics-schools-program-new-website-provides-data
[2] https://www.census.gov/schools/

#opendata #opengov #openeducation
"Мы не ждём открытые данные, мы сами их создаём" (c)

Для всех кто любит работать данными, кто ищет данные или же хочет помочь, выступить волонтёром, ещё один небольшой, но важный проект по сбору задач по web scraping (извлечению данных из веб сайтов).
Web scraping - это когда нет данных для удобной выгрузки и приходится писать специальные программы для извлечения данных из HTML.

Вот тут описание - https://github.com/infoculture/scrapetasks
А вот тут список задач - https://github.com/infoculture/scrapetasks/issues

Эти задачи не заменяют, а дополняют наши задачи для хакатонов - https://github.com/infoculture/datatasks/issues
Но задачи для хакатонов претендуют на некоторую законченность, а работа с данными не создаёт ничего кроме скриптов и данных. Но может помочь и
Вам и многим другим в будущих проектах.

Как всегда - если нехватает времени написать подробную задачу - напишите мне со ссылкой на текущий онлайн ресурс/сайт и я сделаю для него отдельную задачу там же.

(Со мной можно связаться через чат к этому каналу https://telegram.me/begtinchat или через телеграм напрямую https://telegram.me/ibegtin)

#opendata #opengov #scraping
В 2011 году я начал писать книгу «Открытое государство» о том как открытость государства (государственного управления) устроена и о том откуда она происходит и как должна реализоваться. В то же время и в России началось «Открытое правительство», а также я много усилий посвятил практическим проектам таким как «Госзатраты» и «Открытая полиция» в итоге после нескольких подходов книгу я всё откладывал, надеясь пополнить живыми примерами через год-два.

Но увы, к нынешнему 2016 году всё поменялось настолько что уже написанные главы требуют вдумчивого переписывания, а новое не покажет российскую практики открытости в лучшем свете. За очень редким исключением.

Привожу ту главу которая остаётся неизменной - это глава «Термины»
——
ВЕЛИКОБРИТАНИЯ 1993 ГОД. ПЕРВЫЙ ОФИЦИАЛЬНЫЙ ДОКУМЕНТ Одно из самых первых серьёзных и детально раскрытых определений Открытости государства содержится в документе 1993 года, в докладе герцога Ланкастера в главе 1 и пункте 1.1: “1.1 Открытое государство - это часть эффективной демократии. Граждане должны иметь адекватный доступ к информации и анализу на основе которого государство работает. Министры и публичные служащие обязаны разъяснять их законы, решений и действия общественности. Государство, тем не менее, нуждается в том чтобы хранить некоторые секреты и обязано защищать личную жизнь тех кто кем оно управляет.” «Open Government» Presented to Parliament by the Chancellor of The Duchy of Lancaster By Command of Her Majesty July 1993 В том же документе это неоднократно раскрывается и я приведу еще несколько выдержек оттуда же из главы 4, пункт 4.3: “4.3 Ключевыми условиями для того чтобы положения данного документа были уставлены являются: - четкая формулировка принципов на которых информация может быть доступна; - четкая формулировка условий на которых информация может быть оправданно сокрыта; - обособленный, авторитетный и независимый контроль” Оригинал: https://www.official-documents.gov.uk/document/cm22/2290/2290.pdf Две этих коротких выдержки вполне четко определяют что такое открытое государство. Открытость – это в первую очередь доступ к информации, пусть и с некоторым оговорками которые здесь упомянуты. Двинемся дальше.
УЭЛЬС 2002 ГОД. МИНИСТР ОТКРЫТОГО ГОСУДАРСТВА Выступление министра открытого государства Уэльса Карвина Джонса. … Создание открытого государства – это большое испытание, но намерение в том чтобы администрация достигла целей и превзошла требования Законодательство о свободе информации (Freedom of Information legislation). Наши цели амбициозны и испытывающие, но наш выбор искренен… Оригинал: https://new.wales.gov.uk/newsroom/businessandeconomy/2002/4027277/?lang=en В этом определении мы можем увидеть еще более точную формулировку и она раскрывается через так называемые законы свободы доступа к информации FOI (Freedom of Information)
OECD POLICY BRIEF (ПУБЛИКАЦИИ ОЭСР) 2005 ГОД С точки зрения общественности, открытое государство, то, где бизнес, общественные организации и граждане могут: • “знать” – получать релевантную и понимаемую информацию; • “приобретать” – получать сервисы и взаимодействовать с государством; • “создавать” – принимать участие в процессе принятия решений. Принципы хорошего управления – прозрачность и подотчетность; честность и равенство; действенность и результативность; уважение к закону; и высокие стандарты этичного поведения – представляют основу того на чем построено открытое государство. Оригинал: https://www.oecd.org/dataoecd/1/35/34455306.pdf На сей раз определение становится шире и в нем можно увидеть, как тех на кого открытое государство ориентировано – бизнес, общественные организации и граждане и то что является его неотъемлемой частью – доступ к информации (“знать”), эффективность (“приобретать”) и вовлечение (“создавать”). Даже с оглядкой на то что ОЭСР – это международная организация с акцентом на экономике, безусловно это определение достаточно хорошо чтобы его можно было бы использовать и сейчас.
ВЕЛИКОБРИТАНИЯ 2007 ГОД. ИНФОРМАЦИОННЫЙ КОМИССАР РИЧАРД ТОМАС
В одном из выступлений в 2007 году к теме открытости государства обратился информационный комиссар Великобритании, Ричард Томас. Если общество сейчас в большинстве видит пользу от большей открытости, позвольте мне обратится к отражению глубоких конституционных, законодательных, политических и административных размышлений приводящих к тому что открытое государство это безусловно хорошее государство. Возможно есть презумпция раскрытия информации, но, свобода информации, в значительной степени, это возможность применения конкретных исключений и взвешивание конкурирующих общественных интересов. Это неизбежно, что линии границы все еще прочерчиваются. Оригинал: https://www.ico.gov.uk/upload/documents/library/freedom_of_information/research_and_reports/northumbria_text.pdf Это то что можно назвать наиболее осторожным определением. При том что в Великобритании довольно давно считается что свобода доступа к информации – это хорошо, однако в всегда существуют оговорки по открытию той информации что составляет государственную тайну. А также существуют ограничения на публикацию личной информации, то что называют персональными данными. Соблюдение баланса интересов различных групп общества – это, пожалуй, один из наиболее важных аргументов в дискуссиях об открытости в зарубежных странах. И вот здесь я сделаю небольшое отступление и обращусь к другому термину упомянутому в этом. Хорошее государство или Good Government можно раскрыть и как хорошее или надлежащее управление.
ЕВРОПЕЙСКОЕ УПРАВЛЕНИЕ. GOOD GOVERNANCE. 2001 ГОД Этот термин, Good Governance или, на русском языке, “Надлежащее управление”, был упомянут и подробно раскрыт в официальном документе Европейского союза под названием “European Governance”. Что это такое раскрывается в следующих принципах: • Открытость. Институты должны работать в более открытой манере. Вместе со странами участниками они должны активно взаимодействовать о том что ЕС делает и какие решения принимает. Они должны использовать язык которые доступен и понятен широкой общественности. Это особенно значимо по в целях улучшения доверия сложным институтам. • Участие. Качество, соответствие и эффективность стратегий ЕС зависят от того насколько мы широко участие по всей цепочке принятия решений — от концепции до реализации. Улучшение в участии ведет к большему доверию к конечному результату и Институтам проводящим политику. Участие зависит от центральных правительств включающих подобных подход при разработке и реализации политик ЕС. • Подотчетность. Роли законодательного и исполнительного процесса требуют большей ясности. Каждый из Институтов ЕС должен разъяснить и взять ответственность за то что они делают в Европе. Однако также требуется большая ясность и ответственность от входящих стран и всех кто вовлечен в разработку и внедрение политик ЕС на любом уровне. • Эффективность. Политики должны быть эффективными и своевременными, представляя то что необходимо основываясь на ясных целях, оценке последующего эффекта и, где возможно, прошлом опыте. Эффективность также зависит от реализации политик ЕС в пропорциональной манере и принятии решений на наиболее подходящем уровне. • Слаженность. Политики и действия должны быть согласованными и легко понимаемыми. Необходимости согласованности в Союзе возрастает, число задач растет, увеличение влечет рост разнообразия таких как климатические и демографические изменения по границам и секторальные политики на которых Союз основан; региональные и местные власти все более вовлекаются в политики ЕС. Согласованность требует политического лидерства и сильной ответственности в части Институтов для уверенности адекватного подхода к комплексным системам. Источник: https://eur-lex.europa.eu/LexUriServ/site/en/com/2001/com2001_0428en01.pdf ДЕКЛАРАЦИЯ ПАРТНЕРСТВА ОТКРЫТЫХ ПРАВИТЕЛЬСТВ. НАШИ ДНИ.
Пройдя через все определения выше мы наконец-то приходим к тому что же происходит в мире сейчас. Все те принципы что звучали ранее, в разных формах и подробностях нашли свое отражение в документе партнерства открытых правительств (Open Government Partnership). Эта международная организация была создана в сентябре 2011 года как раз с целью развития открытости стран. Обратимся к её декларации.
— Мы признаем что люди по всему миру требуют большей открытости от государства. Они призывают к большему участию граждан в публичных отношениях, ищут пути к тому чтобы сделать их государства более открытыми, ответственными, подотчетными и эффективными. Мы осознаем что страны находятся на разных стадиях в их усилиях по распространению открытости в государстве и каждый из нас выбирает подход соответствующий нашим национальным приоритетам и условиям и пожеланиям сограждан. Мы принимаем ответственность в участии в усилении нашего вклада для распространения прозрачности, борьбы с коррупцией, вовлечении граждан и использовании мощи новых технологии для обеспечения государства более эффективным и подотчетным. Мы поддерживаем ценности открытости в нашем взаимодействии с гражданами для улучшении услуг, управления общественными ресурсами, распространении инноваций и создания безопасных сообществ. Мы видим принципы прозрачности и открытости государства в целью достижения большего процветания, качества жизни и человеческого достоинства в наших собственных странах и все более объединенном мире. Источник: https://www.opengovpartnership.org/sites/www.opengovpartnership.org/files/page_files/OGP_Declaration.pdf У этого безусловно важного документа есть лишь один недостаток – многие определения открытости там установлены как данность, они не раскрыты и предполагается что все мы под открытостью понимаем что-то одно и этот термин сам означен. —
Василий Гатов в FB написал хорошо связанные сжатые предложения [1] о том как можно изменить/трансформировать медиа в России.

Я бы, честно говоря, только ими не ограничивался. Есть отдельные, не менее важные аспекты такие как:
- региональная и муниципальная материальная поддержка СМИ;
- государственное владение и регулирование инфраструктурой и общими ресурсами необходимыми для работы широковещательных СМИ;
- декриминализация работы журналистов.
Реформа медиа так или иначе будет связана другими давно назревшими реформами.
Например, предположим что будет трансформация налоговой и бюджетной политики и больше средств будет оставляться на региональном и муниципальном уровнях власти. К чему это приведёт? В первую очередь к усилению расходов губернаторов и мэров на "PR-сопровождение". Достаточно вспомнить резкий рост расходов на СМИ от Администрации Сахалинской области [2].

Другой пример - РТРС [3] - "федеральная сеть башен" и разрешения на частоты для радио и телевещания. Да, постепенно не-Интернет СМИ будут ослабевать, но их влияние всё ещё велико и государство имеет рычаги владения на них владея всей инфраструктурой их вещания.

Третий пример - использование "Роскомнадзора" как дубины против онлайн СМИ. Самоцензура - это вполне действенный механизм когда есть что терять. А потерять можно сейчас довольно быстро, например, в случае блокировки сайта СМИ хотя бы на несколько дней.

Ссылки:
[1] https://www.facebook.com/prinzip/posts/10155235573249689
[2] https://rg.ru/2015/03/10/gubernator.html
[3] https://rtrs.ru

#spending #government
Какими визуальными инструментами пользоваться тем кто хочет анализировать данные всерьёз и для практической цели ?

Вот краткий список:
- Orange - https://orange.biolab.si/
- Rapidminer - https://rapidminer.com
- R Analytic Flow - https://r.analyticflow.com/
- R Studio - https://www.rstudio.com/
- Deducer - https://www.deducer.org/pmwiki/pmwiki.php
- Alterix - https://www.alteryx.com/ (платное)
- Microsoft R Server - https://www.microsoft.com/en-us/cloud-platform/r-server (платное)
- Daidaku DSS - https://www.dataiku.com/ (платное)

#opendata #data #datamining
В рамках проекта GODAN (Global Open Data in Agriculture & Nutrition) - глобальные открытые данные в сельском хозяйстве и потреблении еды выходит всё больше интересных материалов о международной кооперации в области данных.

Команда The Engine Room [1] в лице Lindsay Ferris и Zara Rahman подготовили брошюру Responsible Data in Agriculture [2] о востребованности и особенностях открытых данных в сельском хозяйстве и производстве и потреблении еды.

Исследователи Dean Allemang и Bobbin Teegarden из Working Ontologist [3] подготовили документ A Global Data Ecosystem for Agriculture and Food [4] с акцентом на интеграцию данных создаваемых в многочисленных исследовательских центрах.

И от Jeremy de Beer из Университета Оттавы документ «Ownership of Open Data: Governance Options for Agriculture and Nutrition» [5] о том кто и как владеет открытыми данными и как необходимо менять законодательство и международные соглашения чтобы это изменить.

На сегодняшний день России и стран постсоветского пространства нет в этом проекте ни в какой форме. Проект был запущен в 2013 году на саммите OGP и существует в форме 5 летнего проекта с общим бюджетом в $6.5 миллионов долларов на при 5 постоянных позициях. Финансирование обеспечивают: Правительства США и Великобритании и группой межгосударственной и международных организаций [6]. Все это происходит в партнёрстве с 380 организациями по всему миру [7]

Из интересных результатов я бы уже отметил VEST Agroportal Map of Standards [8] и Agroportal [9], каталоги стандартов работы с данными в сельском хозяйстве. Можно увидеть как сельское хозяйство претерпевает те же изменения что и биология ранее. Биология разделилась на «мокрую» и «сухую» в которой существенное место заняло биоинформатика. Сейчас большие данные и принципы биоинформатики формируют сельхозинформатику или агроинформатику и новую профессию agricultural data scientist [10].

Ссылки:
[1] https://www.theengineroom.org/
[2] https://www.godan.info/documents/responsible-data-agriculture
[3] https://workingontologist.com/
[4] https://www.godan.info/documents/data-ecosystem-agriculture-and-food
[5] https://www.godan.info/documents/ownership-open-data-governance-options-agriculture-and-nutrition-0
[6] https://www.godan.info/pages/resources-and-financing
[7] https://www.godan.info/partners
[8] https://vest.agrisemantics.org
[9] https://agroportal.lirmm.fr
[10] https://www.indeed.com/q-Agriculture-Technology-Platform-Data-Scientist-jobs.html

#opendata #opengov #nutrition #agriculture