Hi everyone! Today we are officially announcing our Open Data Armenia project. It is entirely dedicated to the topic of open data in Armenia as well as related to the Armenian language, culture, and history around the world.

As a first step, we created the open data catalog https://data.opendata.am/dataset/, where 73 datasets have already been gathered. This catalog will be enriched with new datasets on language, history, life quality, statistics, the government structure, and much more.

This kind of machine-readable open data is a major boon to programmers, analysts, journalists, researchers, students, and teachers.

For example, you can find such datasets in the catalog as:
-National Law Database https://data.opendata.am/dataset/arlis-db (23GB)
-Wikipedia dumps in Armenian https://data.opendata.am/dataset/hywiki-xml-dumps
-Armenian trade statistics with ASEAN countries https://data.opendata.am/dataset/asean-am-hs2
and much, much more!

This catalog is just the beginning, we will continue publishing new datasets, translating texts on how to work with the data, help those who use it, as well as creating new projects based on it.

Subscribe to this Telegram channel, stay tuned as well and help us in creating open data and projects based on it. For example, if you see that there are data that are not yet open and only available as HTML or PDF files, it would be a great help to our project if you could help convert this data into CSV/JSON/XML formats and publish it in the Open Data Armenia catalog.

Please, email any ideas, partnership offers, willingness to help, etc. to [email protected].

#opendata #armenia #opengov

Ողջո~ւյն բոլորին: Այսօր մենք պաշտոնապես հայտարարում ենք մեր Open Data Armenia նախագծի մեկնարկի մասին: Այն ամբողջությամբ նվիրված է Հայաստանում բաց տվյալների մշակույթի զարգացմանն ու ամբողջ աշխարհում հայոց լեզվի, մշակույթի և պատմության հետ կապված բաց տվյալների հավաքագրմանը:
Որպես առաջին քայլ` մենք ստեղծեցինք բաց տվյալների պորտալը https://data.opendata.am/dataset/, որտեղ արդեն հրապարակված է տվյալների 73 հավաքածու և որը կհամալրվի լեզվի, պատմության, կյանքի որակի, վիճակագրության, պետական կառավարման ստրուկտուրայի հետ կապված տվյալներով, և սա դեռ ամենը չէ:

Նման մեքենայաընթեռնելի բաց տվյալները ծրագրավորողների, վերլուծաբանների, լրագրողների, հետազոտողների, ուսանողների ու դասախոսների համար կարևորագույն հենարան են:

Օրինակ, գրացուցակում կարելի է գտնել այսպիսի տվյալներ.
ՀՀ օրենսդրության բազա https://data.opendata.am/dataset/arlis-db (23GB)
Հայալեզու Վիքիպեդիայի «դամփեր»‎ https://data.opendata.am/dataset/hywiki-xml-dumps
ՀՀ-ASEANի երկրներ առևտրի վիճակագրություն https://data.opendata.am/dataset/asean-am-hs2
և սա դեռ ամենը չէ:

Այդ գրացուցակը լոկ սկիզբն է. մենք կշարունակենք տվյալների նոր հավաքածուներ հրապարակել, թարգմանել տվյալների հետ աշխատանքի մասին ուսուցողական նյութեր, օգնել դրանք օգտագործողներին, ինչպես նաև ստեղծել դրանց վրա հիմնված նոր նախագծեր:

Բաժանորդագրվեք այս տելեգրամ ալիքին և հետևեք լուրերին, օգնեք մեզ ստեղծել բաց տվյալներ ու դրանց վրա հիմնված ծրագրեր: Օրինակ’ եթե դուք տեսնում եք, որ որևէ տվյալներ դեռևս բաց չեն ու հասանելի են միայն HTML կամ PDF ֆորմատով` մեզ համար մեծ օգնություն կլինի, եթե դուք օժանդակեք` այդ տվյալները վերածելով CSV/JSON/XML ֆորմատների և դրանք հրապարակեք Open Data Armenia տվյալների գրացուցակում:

Գաղափարները, համագործակցության առաջարկները, օգնելու պատրաստակամությունը և այլն մեզ ուղղեք [email protected] էլեկտոնային հասցեով:

#opendata #armenia #opengov

Всем привет! Сегодня мы официально анонсируем наш проект Open Data Armenia. Он полностью посвящён теме открытых данных в Армении и связанных с армянским языком, культурой и историей по всему миру.

Первым шагом мы создали каталог открытых данных https://data.opendata.am/dataset/ где уже сейчас собрано 73 набора данных, и этот каталог будет пополняться, будут новые наборы данных о языке, истории, качестве жизни, статистике, устройстве государства и многое другое.

Подобные машиночитаемые открытые данные являются важнейшим подспорьем для программистов, аналитиков, журналистов, исследователей, студентов и преподавателей.

Например, в каталоге можно найти такие наборы данных, как:
База законодательства страны https://data.opendata.am/dataset/arlis-db (23 GB)
Дампы Википедии на армянском языке https://data.opendata.am/dataset/hywiki-xml-dumps
Статистика торговли Армении со странами АСЕАН https://data.opendata.am/dataset/asean-am-hs2
и многое, многое другое!

Этот каталог - это только начало, мы продолжим публиковать новые наборы данных, переводить тексты о том, как с данными работать, помогать тем, кто их использует, а также создавать новые проекты на их основе.

Подписывайтесь на этот телеграм канал и следите за новостями, помогайте нам в создании открытых данных и проектах на их основе. Например, если вы видите, что есть данные, которые ещё не являются открытыми и доступны только в виде HTML или PDF файлов, то большой помощью для нашего проекта будет, если вы поможете преобразовать эти данные в форматы CSV/JSON/XML и опубликуете в каталоге данных Open Data Armenia.

Идеи, предложения партнерства, готовность помочь и тд. - пишите на [email protected].

#opendata #armenia #opengov

Where to find sociological data about Armenia? Let's take a look:

- IPUMS International database of the sociological survey. It's not a data catalog but a unified database. It includes data on Armenia surveys in 2001 and 2011
- World Bank Microdata catalog database of all microdata surveys in the World. It includes 81 survey datasets from Armenia.
- Food and Agriculture Microdata Catalogue 25 survey datasets from UN FAO agency.

And Armenian statistical agency provides Armstat Microdata Library with 26 datasets available after registration.

Microdata datasets is not always provided as open data, but sometimes they could be downloaded as public files or requested from a data provider.

#opendata #datasets #sociology #data #armenia

Armenian official national geoportal maparmenia.am was announced about a year ago but is not available right now, and even when it was available, it needed to be more open, more open data, anyway.

So how to find Armenian geodata, map layers, and other spatial datasets? Here is a list of available open data catalogs:
- VGSE Armenia https://vgse.geology.am Geonode-based geoportal provided by the Institute of Geological Sciences of Armenia. It includes 12 map layers related to geology.
- The Armenian Soil Information System (ArmSIS) https://armsis.cas.am was created by the Armenian National Agrarian University and other research institutions of Armenia by request of the Ministry of Economy. It's Geonode based and provides open API to access 30 data layers.
- Open data portal of Armenia, a part of the Interactive Forest Atlas of Armenia https://data-download-gfw.hub.arcgis.com/ , it's an ArcGIS Hub based open data portal provided by NGO REC Caucasus with government and international geo data about the country with a focus on forestry.
- Geoserver of the Center for Ecological-Noosphere Studies National Academy of Sciences, RA https://og.cens.am:8081/geoserver . This geoportal includes map layers and open geo API: CSW, WFS, WMS, and e.t.c. It uses OS Geo Geoserver open-source software.

Many more spatial data about Armenia are available worldwide, and more to tell about each data catalog mentioned in this post. We will regularly write about them here and add the most exciting datasets to the data.opendata.am data catalog.

If you know any interesting spatial data catalog or spatial dataset related to the Republic of Armenia or Armenian history, please comment.

#opendata #datacatalos #armenia #spatialdata #geodata

[RU] Многие открытые данные и материалы культурного наследия Армении и армян разбросаны по архивам по всему миру, картины художников, работы скульпторов, книги писателей доступны на сайтах музеев, галерей и архивов. Чаще всего их невозможно найти просто указанием страны, не все архивы позволяют искать идентифицируя по культурному происхождению или по стране.

В некоторых странах, например, в Российской Федерации значительная часть культурных данных доступны в виде больших наборов данных, доступных для выгрузки, анализа и исследований. Где найти эти культурные данные?

Госкаталог музейного фонда (https://goskatalog.ru)

Создан Минкультуры РФ, включает описание и превью более чем 37 миллионов экспонатов. В каталоге много материалов относящихся к Армении, например, картины Ованесса Айваязана (Ивана Айвазовского) [1] или картины и иные материалы связанные с работой Мартироса Сарьяна [2]. Данные из Госкаталога доступны в на портале открытых данных Минкультуры РФ, их можно скачать и найти в них эти и другие материалы связанные с культурой и историей Армении и армянского народа.

Артефакт – гид по музеям России (https://ar.culture.ru)

Другой проект Минкультуры России охватывает множество музеев РФ и предоставляет изображения экспонатов в высоком качестве. В этом проекте, также, немало картин имеющих отношение к Армении и армянским художникам. Там есть страница и галерея посвящённая Ивану Айвазовскому (Ованесу Айвазяну) [4], или Налбандяна Дмитрия Аркадьевича [5] и многих других художников. В системе Артефакт не публикуются открытые данные, но есть недокументированное API и возможность собрать данных через скрейпинг данных.

Национальная электронная библиотека (https://rusneb.ru)

В Национальной электронной библиотеке собраны миллионы книг открытого доступа из библиотек и архивов России. Многие книги в НЭБ написаны армянскими писателями на русском языке или переведены на русский язык. Например, в НЭБ есть книги Мартироса Сарьяна [6] и Ованеса Туманяна [7], а также небольшое число книг на армянском языке [8]. У НЭБ нет открытого API или открытых данных, но эти и другие материалы можно найти поиском и собрать скрейпингом с веб-страниц НЭБ. Также в НЭБ немало документов Российской Империи включающих историю и статистику губерний населённых армянами.
—
Этот список источников далеко не исчерпывающий, многие художественные произведения публикуются на сайтах других музеев, галерей, библиотек и архивов. Мы собираем список таких источников данных со всего мира и если Вы знаете такие сайты, обязательно напишите нам, мы опубликуем итоговый список в в каталоге данных Open Data Armenia и организуем сбор этих данных.

Ссылки:
[1] https://t.ly/MbOQ
[2] https://t.ly/g2-LI
[3] https://opendata.mkrf.ru/opendata/7705851331-museum-exhibits
[4] https://ar.culture.ru/ru/person/ayvazovskiy-ik
[5] https://ar.culture.ru/ru/person/dmitriy-arkadevich-nalbandyan
[6] https://t.ly/A9ph
[7] https://t.ly/T71z
[8] https://t.ly/FAsT

#opendata #digitalheritage #culture #armenia #datasets

For everyone ready to help with data collection for Open Data Armenia, we have started publishing tasks for volunteers. The first six tasks are already available via the link. If you have some free time, you are a programmer or an analyst; you can help the community. If you need programming skills but know where data needs to be collected/transformed, or you have ideas about what can be built on their basis, we invite you to share your thoughts in the general chat.

Для всех кто готов помочь со сбором данных для Open Data Armenia мы начали публиковать задачи для волонтеров. Первые 6 задач уже доступны по ссылке. Если у Вас есть немного свободного времени, Вы программист или аналитик, то Вы можете помочь сообществу. Если Вы не умеете программировать, но знаете где есть данные которые нужно собрать/преобразовать или у Вас есть идеи что можно на их основе построить, приглашаем поделиться идеями в общем чате.

Բոլորի համար, ովքեր պատրաստ են օգնել Open Data Armenia-ի տվյալների հավաքագրմանը, մենք սկսել ենք կամավորների համար առաջադրանքներ հրապարակել: Առաջին վեց առաջադրանքներն արդեն հասանելի են հղման միջոցով։ Եթե ունեք ազատ ժամանակ, դուք ծրագրավորող եք կամ վերլուծաբան; դուք կարող եք օգնել համայնքին: Եթե Ձեզ անհրաժեշտ են ծրագրավորման հմտություններ, բայց գիտեք, թե որտեղ պետք է տվյալները հավաքվեն/փոխակերպվեն, կամ ունեք գաղափարներ այն մասին, թե ինչ կարելի է կառուցել դրանց հիման վրա, մենք ձեզ հրավիրում ենք կիսվել ձեր մտքերով ընդհանուր չաթում:

Tasks list https://github.com/opendataam/opendatam-tasks/issues
Chat for discussion https://t.iss.one/opendataamchat

#opendata #armenia #tasks #volunteering

In the non-Armenian data section of Armenia, biodiversity data in the country is published as part of the GBIF (Global Biodiversity Information Facility) global project, which brings together educational materials, news, tools and data related to wildlife.

As part of the project, researchers from many countries create individual copies of the IPT product: The Integrated Publishing Toolkit, with which they publish their data sets.

Such data are also published by Armenian scientists on the Armenia IPT portal, where 4 biodiversity data sets are posted.

Also, the nature of Armenia is studied by scientists from other countries and their work and data are also published on GBIF and can be found in the general data catalog

That's 32 datasets to date.

All data are presented in machine-readable DwC-A and EML formats, and are also published under open licenses CC-BY and CC0

#opendata #biodiversity #armenia #biology

[EN] The Armenian Ark: Evidence of the Armenian People's Emigration to North America in the 1930s

The source is a database with various queries and detailed filters searching for information about a person: by name, place of birth or death, place of residence and residence address, and more.

For example, there is a dataset with information about the personal information of passengers and the ships on which they arrived. https://markarslan.org/ArmenianImmigrants/ShipManifests.csv.

Project link: https://markarslan.org/ArmenianImmigrants/Public-ProjectReportsandQueries.php?submit=Project+Reports+%26+Queries

Other historical sources and datasets can be found in the History group at https://data.opendata.am.

If you know of new sources, please share that knowledge with us!

#opendata #armenia #history #emigrants

[EN] We keep working on new data tasks for volunteers and we added new tasks recently:
- Collect data from legal acts drafts website www.e-draft.am
- Collect metadata on the reports of the Armenian NGOs
- Collect the data of the Exchange Rates Archive
- Worldwide Armenian Churches Lists Extraction
- Convert data of Research on Armenian Architecture from HTML to machine readable data (csv, geojson)
- Extraction of Electronic Catalogue of Armenian Cultural Values
- Collect metadata of Armenian historical documents

And we would like to thank Github user arsen41531 for the first completed task: Extract government budget data from Republic of Armenia interactive budget website. Parser and data available at https://github.com/opendataam/opendatam-egov-am-budget-parser Thanks a lot Arsen!

If you have some free time and programming skills, you could help to create more open data about Armenia or related to Armenia. Please take any of these tasks.

If you don't have programming skills but you have ideas in mind about how to find and use data if it will be machine-readable open data, please write in chat https://t.iss.one/opendataamchat, we will help to convert ideas into tasks for volunteers.

if you know IT communities willing to help to bring more open data online, please share, like and repost :)

#opendata #opensource #datatasks #volunteering

[EN, AM ↓] 3D Models preserving Armenian cultural heritage

We continue introducing our team’s findings to you. Today’s highlights are the two sources with three-dimensional models of Armenian cultural sites. Such reconstructions are a wild-card when dealing with objects that are unavailable either due to their far-away location or imminent threat of destruction, especially in the post-war periods. 3D models allow us to monitor their state and disseminate cultural knowledge. Sometimes we have to preserve the digital images of fragile buildings or those already demolished, which will enable generations to come to restore their initial appearance as a 100% precise extract.

The first one is a catalogue by 3Bee.io which already contains almost 20 models that can also be viewed in Virtual Reality. The implementers of the project capture the data at the highest possible resolutions and archive them in raw formats so that it can be re-processed in future.

The second one is fulfilled by the Research on Armenian Architecture team and displays 3D videoclips and images of locations in Ani and Khtzkonk (Western Armenia).

Overall, much more work on these is needed to digitalize Armenia’s cultural heritage. However, file-format support and longevity are major considerations for digital preservation, and the field is yet to develop its best practices. As for now, .PLY (polygon file) and .OBJ (object file) are deemed more appropriate as they are widely supported and compatible across platforms [1].

Other historical sources and datasets can be found in the History group at https://data.opendata.am.
If you are aware of other sources, please share them with us!

#opendata #armenia #history #architecture

[1]Using Three-Dimensional Modeling to Preserve Cultural Heritage (2017). https://blogs.loc.gov/thesignal/2017/01/using-three-dimensional-modeling-to-preserve-cultural-heritage/

[AM, EN ↑] Հայկական մշակութային ժառանգության պահպանմանը ուղղված 3D մոդելներ

Մենք շարունակում ենք Ձեզ ներկայացնել մեր թիմի հետաքրքրաշարժ բացահայտումները: Այսօր կուզեինք առանձնացնել հայկական մշակութային օբյեկտների եռաչափ մոդելների երկու աղբյուր: Նման վերակառուցումները փրկության են հասնում, երբ գործ ունենք այնպիսի օբյեկտների հետ, որոնք անհասանելի են իրենց հեռավոր վայրերում կամ ոչնչացման անմիջական սպառնալիքի տակ գտնվելու պատճառով, հատկապես հետպատերազմյան շրջաններում: Եռաչափ մոդելները թույլ են տալիս հետևել նման կառույցների վիճակին և տարածել մշակութային գիտելիքը: Երբեմն մենք ստիպված ենք պահպանել փխրուն կամ արդեն ոչնչացված շինությունների թվային պատկերները, ինչը թույլ կտա գալիք սերունդներին վերականգնել դրանց սկզբնական պատկերը 100% ճշգրիտ կրկնօրինակի տեսքով:

Առաջինը գրացուցակ է, որը հավաքագրում է 3Bee.io-ն և որն արդեն պարունակում է գրեթե 20 մոդել, որոնք կարող են դիտվել նաև վիրտուալ իրականության մեջ: Ծրագիրը իրականացնողները հավաքում են տվյալները հնարավորինս բարձր լուծաչափով և արխիվացնում դրանք անմշակ ձևաչափերով` հետագա օգտագործման համար:

Երկրորդը իրականացվել է Research on Armenian Architecture թիմի կողմից և ցուցադրում է Անիի և Խծկոնքի (Արևմտյան Հայաստան) վայրերի 3D տեսանյութեր և պատկերներ:

Ընդհանուր առմամբ, Հայաստանի մշակութային ժառանգության թվայնացման համար շատ ավելի մեծ աշխատանք է պահանջվում։ Այնուամենայնիվ, ֆայլի ձևաչափի ընթերցանելիությունն ու կայունությունը տվյալների թվային պահպանման հիմնական գործոններն են, և այս ոլորտում դեռ լավագույն պրակտիկաների հարցում որոշակիություն չկա: Այս պահին .PLY (պոլիգոն ֆայլ) և .OBJ (օբյեկտ ֆայլ) համարվում են ավելի նպատակահարմար, քանի որ լայնորեն հասանելի են և համատեղելի են տարբեր հարթակների հետ:

Այլ պատմական աղբյուրներ և տվյալների հավաքածուներ կարելի է գտնել մեր պատմություն խմբում ՝ https://data.opendata.am:

Եթե գիտեք այլ հետաքրքիր աղբյուրներ, խնդրում ենք կիսել դրանք մեզ հետ:

[RU] Наша команда продолжает собирать наборы данных для наполнения каталога данных и отдельное спасибо волонтерам которые помогают в этом деле, кстати, мы добавили новых задач и сейчас 23 открытые задачи для тех кто готов немного потратить время и помочь превратить существующие немашиночитаемые данные в машиночитаемый формат.

Каталог данных - это не спринт, а марафон, цель его создания в том чтобы быть ответом по умолчанию на вопрос "Где найти данные об Армении, армянскому языку, армянской культуре? ", а также быть основной других проектов.

Мы планируем наполнять каталог данных всё время и до конца лета 2023 г. собрать как можно больше данных, а в начале осени провести конкурс или хакатон по использованию этих и других данных. И вот здесь есть развилка, которую важно проговорить.

Конкурс, обычно, объявляется от нескольких недель до месяца в течении которых участники делают проекты на данных и отправляют на выбранные номинации. Можно самостоятельно управлять своим временем, подаваться хоть сразу, хоть в последний момент и, самое главное, времени много на то чтобы сделать большой продукт/проект/визуализацию. Минусы конкурса в том что они требуют, как правило, уже большого числа участников ожидающих его объявления и готовых участвовать. В конкурсе могут принимать участники откуда угодно, те кто хорошо говорит и пишет на армянском, не всегда знающие армянский язык армяне разбросанные по всему миру и те кто связывает себя с Арменией и её историей и будущем вне зависимости от того откуда они.

Хакатон - это формат интенсивной работы в течении 1-2 дней. Прямо перед хакатоном участники формируют команды или решаются участвовать самостоятельно. Как правильно, для хакатонов есть четкие или примерные задачи того что хотелось бы сделать. Поскольку времени мало то и результаты хакатонов чаще макеты, прототипы, не всегда сложные завершённые продукты. Хакатоны обычно проводили вживую, но во время COVID-19 многие перешли на дистанционную работу и появились онлайн хакатоны где команды и менторы команд общались в чатах без личного присутствия. Онлайн хакатон похож на конкурс, в нём могут принять участие все, офлайн хакатон, это, конечно, мероприятие вживую в Ереване и участие смогут принять, в основном, те кто будут участвовать в нём лично.

Вне зависимости от того будет ли это конкурс или хакатон, у него обязательно будет призовой фонд, а от подаваемые работы должны быть с открытым кодом и на открытых данных. У него будут партнеры и интересные задачи!

Итого, сейчас мы выбираем форму проведения мероприятия, онлайн или офлайн, конкурс или хакатон. Наше сообщество пока только растёт, но уже пришло время задавать вопросы. Поэтому следующим постом как раз будет вопрос о том что Вы думаете и какое мероприятие ждёте.

#opendata #armenia #contest #hackathon

[EN] Awesome list: a toolkit for text analyzis Armenian language

- Eastern Armenian National Corpus Electronic Library provides a full view of works by classical authors (these books are in the public domain because their authors died more than 70 years ago). The corpus contains 4547379 words from 104 books by 12 authors. 

- Named entity recognition. pioNer — trained data for Armenian NER using Wikipedia. This corpus provides the gold standard for automatically generated annotated datasets using GloVe models for Armenian. Along with the datasets, 50-, 100-, 200-, and 300-dimensional GloVe word embeddings trained on a collection of Armenian texts from Wikipedia, news, blogs, and encyclopedias have been released.

- The Polyglot library for Python supports language detection, named entity extraction (using Wikipedia data), morphological analysis, transliteration, and sentiment analysis for Armenian.

- Kevin Bougé Stopword Lists Page includes th Armenian language.

- Ranks NL Stopword Lists Page includes the Armenian language.

If you know of new usefull tools and guides, please share that knowledge with us!

Image author Aparna Melaput

#opendata #armenia #language #tools #digitalhumanities

[EN] And here are some new inspiring 3D models, this time of Geghard monastery alongside Ani. They are published at the Open Heritage website. Open Heritage 3D is a project dedicated to making primary 3D cultural heritage data open and accessible as well as to ease sharing these data for publishers.

CyArc which led the documentation of both sites is one of the most authoritative in the field of digital culture preservation. Interestingly, Geghard Monastery was immortalized by the high schoolers of the TUMO Center for Creative Technologies during the two-week workshop ran by CyArk.

Feel free to share if you know any other interesting data sources aimed at preserving cultural heritage.

#opendata #armenia #history #architecture

Natural Language Processing can enhance not only our communication and language knowledge, but also strengthen the historical studies.

Marcella Tambuscio and Tara Lee Andrews in their Geolocation and Named Entity Recognition in Ancient Texts: A Case Study about Ghewond’s Armenian History apply Named Entity Recognition (NER) to Ghewond’s Armenian History. This facilitates drawing the ‘big picture’ of Armenian history in that period and matching historical toponyms with their contemporary counterparts. The outcomes and reproducible validated results of applying the model are published on GitHub. We also added them to our data catalog.

We believe that such studies are going to become more common, making ancient texts more available to a wider public and to the professional community. Tell us if you are aware of similar efforts in the field!

#opendata #armenia #history #language

You are probably going to be surprised, but Armenia holds one of the leading positions in the region of Eastern Europe and Central Asia, backing down only to Ukraine and slightly surpassing Kazakhstan and Russia, according to the Global Data Barometer 2022.

The Armenia’s assessment comprised by Georgia-based experts shows that the country’s relative strength affecting the relatively high index (44.6/100) is its public finance data. On the other hand, the weakest of Armenia’s capabilities is its situation with the open data. We will spare no effort to boost this dimension of Armenia’s culture of dealing with the data, which will result in deeper societal changes, increasing consciousness and self-reflexion, as well as in policy responsiveness and effectiveness.