[RU] Наша команда продолжает собирать наборы данных для наполнения каталога данных и отдельное спасибо волонтерам которые помогают в этом деле, кстати, мы добавили новых задач и сейчас 23 открытые задачи для тех кто готов немного потратить время и помочь превратить существующие немашиночитаемые данные в машиночитаемый формат.

Каталог данных - это не спринт, а марафон, цель его создания в том чтобы быть ответом по умолчанию на вопрос "Где найти данные об Армении, армянскому языку, армянской культуре? ", а также быть основной других проектов.

Мы планируем наполнять каталог данных всё время и до конца лета 2023 г. собрать как можно больше данных, а в начале осени провести конкурс или хакатон по использованию этих и других данных. И вот здесь есть развилка, которую важно проговорить.

Конкурс, обычно, объявляется от нескольких недель до месяца в течении которых участники делают проекты на данных и отправляют на выбранные номинации. Можно самостоятельно управлять своим временем, подаваться хоть сразу, хоть в последний момент и, самое главное, времени много на то чтобы сделать большой продукт/проект/визуализацию. Минусы конкурса в том что они требуют, как правило, уже большого числа участников ожидающих его объявления и готовых участвовать. В конкурсе могут принимать участники откуда угодно, те кто хорошо говорит и пишет на армянском, не всегда знающие армянский язык армяне разбросанные по всему миру и те кто связывает себя с Арменией и её историей и будущем вне зависимости от того откуда они.

Хакатон - это формат интенсивной работы в течении 1-2 дней. Прямо перед хакатоном участники формируют команды или решаются участвовать самостоятельно. Как правильно, для хакатонов есть четкие или примерные задачи того что хотелось бы сделать. Поскольку времени мало то и результаты хакатонов чаще макеты, прототипы, не всегда сложные завершённые продукты. Хакатоны обычно проводили вживую, но во время COVID-19 многие перешли на дистанционную работу и появились онлайн хакатоны где команды и менторы команд общались в чатах без личного присутствия. Онлайн хакатон похож на конкурс, в нём могут принять участие все, офлайн хакатон, это, конечно, мероприятие вживую в Ереване и участие смогут принять, в основном, те кто будут участвовать в нём лично.

Вне зависимости от того будет ли это конкурс или хакатон, у него обязательно будет призовой фонд, а от подаваемые работы должны быть с открытым кодом и на открытых данных. У него будут партнеры и интересные задачи!

Итого, сейчас мы выбираем форму проведения мероприятия, онлайн или офлайн, конкурс или хакатон. Наше сообщество пока только растёт, но уже пришло время задавать вопросы. Поэтому следующим постом как раз будет вопрос о том что Вы думаете и какое мероприятие ждёте.

#opendata #armenia #contest #hackathon

[EN] Awesome list: a toolkit for text analyzis Armenian language

- Eastern Armenian National Corpus Electronic Library provides a full view of works by classical authors (these books are in the public domain because their authors died more than 70 years ago). The corpus contains 4547379 words from 104 books by 12 authors. 

- Named entity recognition. pioNer — trained data for Armenian NER using Wikipedia. This corpus provides the gold standard for automatically generated annotated datasets using GloVe models for Armenian. Along with the datasets, 50-, 100-, 200-, and 300-dimensional GloVe word embeddings trained on a collection of Armenian texts from Wikipedia, news, blogs, and encyclopedias have been released.

- The Polyglot library for Python supports language detection, named entity extraction (using Wikipedia data), morphological analysis, transliteration, and sentiment analysis for Armenian.

- Kevin Bougé Stopword Lists Page includes th Armenian language.

- Ranks NL Stopword Lists Page includes the Armenian language.

If you know of new usefull tools and guides, please share that knowledge with us!

Image author Aparna Melaput

#opendata #armenia #language #tools #digitalhumanities

[EN] And here are some new inspiring 3D models, this time of Geghard monastery alongside Ani. They are published at the Open Heritage website. Open Heritage 3D is a project dedicated to making primary 3D cultural heritage data open and accessible as well as to ease sharing these data for publishers.

CyArc which led the documentation of both sites is one of the most authoritative in the field of digital culture preservation. Interestingly, Geghard Monastery was immortalized by the high schoolers of the TUMO Center for Creative Technologies during the two-week workshop ran by CyArk.

Feel free to share if you know any other interesting data sources aimed at preserving cultural heritage.

#opendata #armenia #history #architecture

Natural Language Processing can enhance not only our communication and language knowledge, but also strengthen the historical studies.

Marcella Tambuscio and Tara Lee Andrews in their Geolocation and Named Entity Recognition in Ancient Texts: A Case Study about Ghewond’s Armenian History apply Named Entity Recognition (NER) to Ghewond’s Armenian History. This facilitates drawing the ‘big picture’ of Armenian history in that period and matching historical toponyms with their contemporary counterparts. The outcomes and reproducible validated results of applying the model are published on GitHub. We also added them to our data catalog.

We believe that such studies are going to become more common, making ancient texts more available to a wider public and to the professional community. Tell us if you are aware of similar efforts in the field!

#opendata #armenia #history #language

More Armenian open data available. We added list of all branches of Armenian post (Haypost) [1] in Armenian, English and Russian. Data collected from Haypost public but undocumented API.

Also we added lists of Armenia related keywords [2] in Russian and, in future, in English to collect Armenia-related data from Russian data sources like Goskatalog and National Electronic Library. These lists are still in development and include mostly geographic names related to Armenia and family names related to Armenians.

We keep working to collect more interesting datasets for our upcoming open data contest that we will announce soon!

LInks:
[1] https://data.opendata.am/dataset/armenian-post-branches
[2] https://github.com/opendataam/armenian-keywords

#opendata #armenia #datasets

Для тех кто ищет идей для вдохновения для визуализации данных, по Армении доступен огромный набор данных
Armenia: High Resolution Population Density Maps + Demographic Estimates [1] созданный компанией Meta в рамках инициативы Data for Good в апреле 2023 года.

Набор данных включает:
- общую число жителей
- распределение населения по возрастным когортам: женщины, мужчины, дети, старики

Все данные доступны в форматах CSV, JSON и GeoTIFF и позиционируются компанией как наиболее точные данные по населению в мире, с детализацией до 30 метров. Подробнее о методологии
можно прочитать на сайте инициативы [2].

На Population Density Explorer [3], доступна интерактивная визуализация этих данных.

Ссылки:
[1] https://data.humdata.org/dataset/armenia-high-resolution-population-density-maps-demographic-estimates
[2] https://dataforgood.facebook.com/dfg/tools/high-resolution-population-density-maps
[3] https://populationexplorer.org/

#opendata #datasets #armenia #population #dataviz

Чего хватает и чего не хватает сообществу, и открытым данным в Армении мы будем активно обсуждать на дне открытых данных в начале марта. На нём же подведём итоги конкурса contest.opendata.am и расскажем о новых проектах нашей НКО Open Data Armenia. Но направлений работы много и следующий мини-опрос о том что наиболее важно и приоритетно. Выбрать можно из нескольких вариантов и в чате @opendataamchat написать о том что может быть о опросе упущено, но очень важно.

#opendata #armenia #polls

[en] Fresh data on Transfers of individuals sent to and received from abroad through commercial banks of RA by countries available from Central Bank of Armenia, in English [1], Armenian [2] and Russian [3]. It's a January 2013 - December 2023 time series
about money inflow and outflow for 50 countries.

It could be a great source for data visualization for everyone who would like to participate in our contest [4].

[ru] Свежие данные о Трансграничных переводах в пользу физических лиц полученные из-за рубежа и перечисления физическими лицами за рубеж осуществленные через банковскую систему РА по странам можно скачать с сайта Центрального Банка Армении на английском, армянском и русском языках. Данные охватывают период с января 2013 по декабрь 2023 года и 50 стран откуда и куда переводятся средства.

Данные могут быть отличным источником по визуализации данных для всех кто планирует участие или уже участвует в нашем конкурсе по открытым данным.

P.S. Хочется надеяться что ЦБ РА однажды начнёт публиковать данные как открытые данные данные, сразу в форматах CSV/Parquet, или через API в формате JSON. Но даже при этом, текущие данные в формате Excel тоже можно использовать после несложных преобразований.

[1] https://www.cba.am/stat/stat_data_eng/5_Money_transfers_of_individuals_by_countries-eng.xlsx
[2] https://www.cba.am/stat/stat_data_arm/5_Money_transfers_of_individuals_by_countries-arm.xlsx
[3] https://www.cba.am/stat/stat_data_rus/5_Money_transfers_of_individuals_by_countries-rus.xlsx
[4] https://contest.opendata.am

#opendata #timeseries #statistics #money #armenia #cbra #dataviz

if you are looking for historical data to visualize take a look at documents published by Russian Electronic Library (REL)

For example, they publish a lot of historical statistical bulletins like this one: Erivan Province First General Population Census of the Russian Empire 1987 [1]

which is part of First General Population Census of the Russian Empire in 1897 [2].

Many more documents and creative works available in REL, Australian Trove Project [3] and Europeana [4]

[1] https://rusneb.ru/catalog/000200_000018_v19_rc_1629518/
[2] https://rusneb.ru/catalog/000200_000018_v19_rc_1629421/
[3] https://trove.nla.gov.au
[4] https://www.europeana.eu

#culture #armenia #armenians #history

Բարեւ բոլորին! Hi everyone! Всем привет! Bonjour à tous!

[en]
We are planning another competition this year. Most likely it will in the beginning of the autumn and be about new and updated topics and nominations. We'll decide which of them are more relevant for Armenia, it's current situation and open data availability. So please take part in our survey and share your vision with us in the @opendataamchat chat.

[ru]
В этом году мы планируем провести еще один конкурс. Скорее всего, он будет будет в начале осени и посвящен новым и обновленным темам и номинациям. Мы решим, какие из них более актуальны для Армении, ее текущей ситуации и доступности открытых данных. Поэтому, пожалуйста, примите участие в нашем опросе и поделитесь с нами своим видением в чате @opendataamchat.

#opendata #armenia #events #contest

[EN]
GIRAI (Global Index of Responsible AI) report is available for 138 countries. It includes Armenian scores as well. Not so good to be honest( Looks like government has to do a lot with AI and it's responsibility.

It's generally available at https://global-index.ai

[RU]
Вышел Глобальный индекс ответственного ИИ (GIRAI) в виде отчета по 138 странам.

В нём есть и Армения, с очень низкими оценками, к сожалению( Похоже что Пр-ву есть много того что нужно сделать в этой области.

С индексом можно ознакомиться по ссылке https://global-index.ai

#armenia #indexes #ratings

[RU]
Немного о наших планах. Мы продолжаем наполнять каталог открытых данных data.opendata.am и отдельное огромное спасибо всем кто помогает нам собрать данные и сделать их общедоступными. Когда Пр-во страны решит создать национальный портал открытых данных страны, надеемся что наша работа вольётся в него и данных станет больше как и больше возможностей по работе с данными.

Коротко о планах на этот год:
1. Планируем добавить больше данных на портал открытых данных.
2. Осенью организуем следующий конкурс и, возможно, пока обсуждаем, хакатон.
3. Уже готовимся ко дню открытых данных на 2025 год.
4. Есть планы создать общественный геопортал Армении, уже собрали для него много геоданных
5. Ищем координатора сообщества внутри страны чтобы ещё активнее помогать сообществу. Скоро опубликуем вакансию
6. Будем организовывать семинары/вебинары как работать с данными.

Если есть какие-либо идеи/предложения/мысли что ещё хорошего можно сделать на данных

[EN]
A little bit about our plans. We continue to fill the catalog of open data data.opendata.am and a special thanks to everyone who helps us to collect data and make it publicly available. If the government of the country decides to create a national portal of open data, we hope that our work will be included in it and the data will become more available, as well as more opportunities to work with data.

Briefly about the plans for this year:
1. We plan to add more data to the Open Data Portal.
2. We will organize the next competition and possibly, still under discussion, a hackathon in autumn.
3. We are already preparing the Open Data Day for 2025.
4. There are plans to create a public geoportal of Armenia, we have already collected a lot of geodata for it.
5. We are looking for a community coordinator within the country to help the community even more actively. We will publish a job offer soon.
6. We will organize workshops/webinars on how to work with data.

If you have any ideas/suggestions/thoughts on what else can be done well with data, please let us know.

#opendata #armenia

[EN] New mapping tool, the "map that is not the map" from Overture [1]. It provides open data, downloadable as GeoJSON files and it's open sourced and could be reused [2].

[RU] Новый картографический инструмент, "карта которая не карта" от Overture. Основан на открытых данных которые можно скачать и на открытом коде который, также доступен [2]

Links:
[1] https://explore.overturemaps.org
[2] https://github.com/OvertureMaps/io-site

#opendata #opensource #maps #mapping #open #data #armenia

[EN] Interesting data about Armenia, outside Armenia. The ArcGIS service (ESRI company) provides search for maps, map layers, scenes, data files and other geospatial resources on its website [1]. More than 1855 resources are available and ready for reuse, most of them are free.
The only problem is that Armenia is also a district of Colombia, a Latin American state, and some maps are about Armenia in Colombia, not Armenia as a country. But it's pretty easy to distinguish between the two.😉


[RU] Интересные данные об Армении, за пределами Армении. Сервис ArcGIS (компания ESRI) обеспечивает поиск карт, слоев карт, сцен, файлов данных и других ресурсов, связанных с геоданными, на своем сайте [1]. Более 1855 ресурсов доступны и готовы к повторному использованию, большинство из них бесплатны.
Единственная проблема заключается в том, что Армения также является округом Колумбии, латиноамериканского государства, и некоторые карты посвящены Армении в Колумбии, а не Армении как стране. Но отличить их довольно просто🙏

[1] https://www.arcgis.com/home/search.html?restrict=false&sortField=relevance&sortOrder=desc&searchTerm=Armenia#content

#opendata #geodata #geospatial #maps #armenia

[RU] Мы работаем над созданием общественного геопортала Армении где можно было бы наглядно смотреть на открытые геоданные, скачивать их, сравнивать, делать визуализации. И для этого мы собираем общедоступные геоданные.

Некоторые источники геоданных уже известны, это:
- проект Sustainable Caucasus [1]
- портал Центра экологических исследований РАН Армении [2]
- портал о земле ArmSIS [3] (более недоступен)
- портал ООН, Humanitarian Data Exchange [4]

С одной стороны геоданных много, и многие уже собраны на data.opendata.am, а с другой точки зрения всегда мало.

Если Вы знаете интересные источники геоданных по Армении/об Армении/Армянских культуре и истории в мире, просим поделиться ими, можно письмом на [email protected] или в чате в телеграм @opendataamchat.

Данные могут быть в форматах KML, SHP, GeoJSON, GML, API Esri ArcGIS, WFS, WMS, GPX и многие другие.

[EN] We are working on the creation of a public geoportal of Armenia where it would be possible to visually look at open geodata, download them, compare them, make visualizations. And for this purpose we are collecting publicly available geodata.

Some sources of geodata are already known, they are:
- Sustainable Caucasus project [1]
- the portal of the Environmental Research Center of the Armenian Academy of Sciences [2]
- ArmSIS land portal [3] (no longer available)
- UN portal, Humanitarian Data Exchange [4].

On the one hand there is a lot of geodata, and many are already collected on data.opendata.am, but on the other hand there is always not enough.

If you know interesting sources of geodata on Armenia/about Armenia/Armenian culture and history in the world, please share them, you can send an email to [email protected] or chat in telegram @opendataamchat.

Data can be in KML, SHP, GeoJSON, GML, Esri ArcGIS API, WFS, WMS, GPX and many other formats.

Ссылки:
[1] https://sustainable-caucasus.unepgrid.ch
[2] https://og.cens.am:8081/
[3] https://armsis.cas.am/
[4] https://data.humdata.org/group/arm

#opendata #geodata #geoportal #armenia #request

[RU] Больше открытых данных об Армении. На сайте Всемирного метеорологического агентства World Weather Information Service [1] публикуются данные прогноза погоды по 3467 городам мира [2] включая станции мониторинга прогноза погоды по Армении.

Данные доступны в виде страниц городов и могут быть выгружены с сайта в машиночитаемых форматах:
- Ереван https://worldweather.wmo.int/en/json/66_en.json
- Севан https://worldweather.wmo.int/en/json/68_en.json
- Капан https://worldweather.wmo.int/en/json/69_en.json
- Ванадзор https://worldweather.wmo.int/en/json/67_en.json
- Дилижан https://worldweather.wmo.int/en/json/2079_en.json
- Джермук https://worldweather.wmo.int/en/json/2080_en.json

Полный список городов включает идентификаторы [2] по которым можно получить данные используя документацию API на сайте [3].

[EN] More open data about Armenia. The World Weather Information Service [1] website of the World Meteorological Agency [1] publishes weather forecast data for 3467 cities of the world [2] including weather forecast monitoring stations for Armenia.

The data are available as city pages and can be downloaded from the site in machine-readable formats:
- Yerevan https://worldweather.wmo.int/en/json/66_en.json
- Sevan https://worldweather.wmo.int/en/json/68_en.json
- Kapan https://worldweather.wmo.int/en/json/69_en.json
- Vanadzor https://worldweather.wmo.int/en/json/67_en.json
- Dilijan https://worldweather.wmo.int/en/json/2079_en.json
- Jermuk https://worldweather.wmo.int/en/json/2080_en.json

The full list of cities includes identifiers [2] for which data can be retrieved using the API documentation on the website [3].

Links:
[1] https://worldweather.wmo.int
[2] https://worldweather.wmo.int/en/json/full_city_list.txt
[3] https://worldweather.wmo.int/en/dataguide.html

#opendata #armenia #climate #meteorology

[EN] Armenian Points of interests (POI) data from Foursquare OS Places [1] is a new dataset in the Open Data Armenia data catalogue. This data is extracted from the huge OS Places dataset previously published by Foursquare [2].

The dataset contains just under 16 thousand locations across the country, most of the place names are in English, Russian and Armenian. The most places are marked in Yerevan, but not only.

Data in Parquet format is a special format for data popular in Data Science, it is most convenient to work with it using such tools as DuckDB, Pandas and Polars.

If someone needs this data in other formats, please write, we will add it.

[RU] Armenian Points of interests (POI) data from Foursquare OS Places [1] новый набор данных в каталоге данных Open Data Armenia. Эти данные извлечены из огромного датасета OS Places ранее опубликованного Foursquare [2].

Датасет содержит чуть менее 16 тысяч точек по стране, большая часть названий мест на английском, русском и армянском языках. Более всего мест отмечено в Ереване, но не только.

Данные в формате Parquet, это специальный формат для данных популярный в Data Science, с ним удобнее всего работать с помощью таких инструментов как DuckDB, Pandas и Polars.

Если кому-то понадобятся эти данные в других форматах, напишите, добавим.

Ссылки:
[1] https://data.opendata.am/dataset/am-os-places
[2] https://t.iss.one/opendataam/131

#opendata #datasets #geodata #armenia #foursquare