Ivan Begtin
7.98K subscribers
1.85K photos
3 videos
101 files
4.55K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts [email protected]
Download Telegram
Мой канал про открытые данные, но не только про них. Я пишу про приватность, госзакупки, государство, цифровое государство, открытость в принципе, big data и прочую смесь практических и не очень тем. Совсем чистых каналов про открытость данных немного, но есть многие близкие по смыслу и духу.

Я уже упоминал канал Андрея Кармацкого https://t.iss.one/urbandata и напомню про канал Strelka Magazine https://t.iss.one/strelkamagazine - это каналы на которых бывают темы близкие к открытым данным и посвященные урбанистике.

В принципе же, у нас в России и в русскоязычном интернете мало блогов и каналов про открытые данные. Если Вы такие знаете - то пишите мне на @ibegtin или в @begtinchat или же вносите их напрямую в Awesome list на GIthub'е https://github.com/infoculture/awesome-opendata-rus

#opendata #opengovernment #telegram
На какие каналы стоит подписаться тем кто любит читать про данные?

1. Mapporn - https://t.iss.one/mapporn визуализация на картах, схемах и в виде инфографики
2. Городские данные - https://t.iss.one/urbandata про данные города, ведет Андрей Кармацкий. Всячески рекомендую
3. Дата публикации - https://t.iss.one/data_publication канал про журналистику данных от Андрея Дорожного
4. Open Data Science - https://t.iss.one/opendatascience автор неизвестен, тема открытость данных в научном применении
5. Картинкамация https://t.iss.one/kartinkamaciya - много инфографики

Если вы знаете другие интересные каналы про данные, визуализацию, открытость гос-ва и не только - пишите мне на @ibegtin или в чат @begtinchat

#opendata #telegram
Моя личная оценка что телеграм будет активно сопротивляться блокировкам, но у ряда пользователей могут возникнуть проблемы с доступом. Так что только в целях перестраховки.

Резервный план:
- почти всё что я пишу тут, я дублирую в Facebook'е https://facebook.com/ibegtin
- скорее всего основной поток сообщений я перенесу на Medium https://medium.com/@ibegtin и на Яндекс.Дзен https://zen.yandex.ru/id/5a315e1300b3dd77beb64261
- Чат про данные у нас продублирован в Slack'е и присоединится к нему можно по ссылке: https://join.slack.com/t/opendatarussia/shared_invite/enQtMjg4ODM2MTQzODU4LWFhYjRiNThjZmFhNjQwMjgyNTZmMDU5NDAwNWUxZmNlYTA2YWI5OGE5MWUyMDBhOGE1ZDUxOTk2NjAyNTY3YWE

#telegram
Про телеграм я всё таки напишу подробнее.

Например, почему ни я, ни очень многие кого я знаю не перестанут им пользоваться. Помимо аргументов которые я приводил в статье на РБК [1], есть много практических аспектов.

1. Телеграм по возможностям - это не только и столько массовый мессенжер, сколько среда для груповой работы. Он отнимал аудиторию не у What'sUp или Facebook Messenger'а, а у Slack'а и его аналогов. "Рабочие чатики" - это массовое применение телеграма и надо признать что получилось это благодаря очень легковесному клиенту и простоте создания чатов, ботов и каналов. Всё оказалось в одном месте и очень удобно. Например, у нас было и есть сообщество по открытым данным в Slack'е [2] до того как появился чат OpenDataRussia [3], но оно так и остаётся скорее резервной площадкой потому что в телеграме всё работе в единой среде.

2. О ботах и каналах. Много лет я искал альтернативу "читалкам RSS" чтобы получать новости в удобном виде. В начале года я понял что удобного не найду и сделал своими руками такую читалку в Телеграме. Читалку управляемую через бот FeedRetranslatorBot [4] который извлекает новости из сайтов и кидает их в телеграм канал выбранный владельцем. Простая штука, лично мне очень удобная, я читаю новости Правительства, Кремля, министерств и тд. все через разные каналы, также как и новости про открытые данные и не только.
Бот наполняет новостями канал Инфокультуры [5] со всех наших проектов и это очень удобно, освобождает много времени.

Эту возможность невозможно перенести ни в один из существующих мессенжеров без существенных накладных расходов. У другого нашего проекта, APICrafter [6] по продаже доступа к API есть также бот в телеграме который раздаёт ключи для тестового доступа [7]. Почему он там и почему так? Его оказалось очень легко, быстро и удобно реализовать.

Кроме того в этом году мы запланировали ботов для проектов: Госзатраты, Открытые НКО, а у проекта Открытая полиция есть чат бот помогающий оценить Ваши навыки взаимодействия с полицией [8].

До тех пор пока не введут личную ответственность граждан за использование Telegram'а и других заблокированных ресурсов, пользоваться, я лично, и большинство тех кого я знаю, будут.

Ссылки:
[1] https://www.rbc.ru/opinions/politics/13/04/2018/5ad0782e9a79470a8e5fa03d
[2] https://join.slack.com/t/opendatarussia/shared_invite/enQtMjg4ODM2MTQzODU4LWFhYjRiNThjZmFhNjQwMjgyNTZmMDU5NDAwNWUxZmNlYTA2YWI5OGE5MWUyMDBhOGE1ZDUxOTk2NjAyNTY3YWE
[3] https://t.iss.one/opendatarussia
[4] https://t.iss.one/FeedRetranslatorBot
[5] https://t.iss.one/infoculture
[6] https://apicrafter.ru
[7] https://t.iss.one/APICrafterBot
[8] https://t.iss.one/openpolice_ruBot

#telegram
Главный вопрос происходящего с Телеграмом, не то почему "Telegram" прыгает с сервера на сервер, а то почему Apple и Google не удалили его приложения.

Обычно эти два монополиста очень чувствительны к судебным решениям. Вот лишь несколько важных примеров:
- сентябрь 2017 года, 23 сентября испанский суд требует от Google удалить из App Store приложение используемое для каталонского референдума [1] и 27 сентября Google его удаляет [2]
- январь 2017 года, Apple и Google исполнили решение российского суда по удалению официального приложения LinkedIn после официального запрета социальной сети в Росии [3]
- январь 2017 года, Apple удаляет официальное приложение New York Times (NYT) которое позволяло обходить блокировку сайта NYT, который ранее был заблокирован властями Китая [4]
- август 2014 года, бразильский суд требует от Apple удалить приложение Secret из бразильского App Store в течение 10 дней после решения суда и Apple удаляет [5]. Впрочем требование было, и к Apple, и к Microsoft, и к Google [6]

Этот список не является исчерпывающим. Главный вопрос на который необходимо понять ответ - это почему в этот раз Google и Apple отказали в удалении приложений.

Все мобильные приложения зависят от двух монопольных экосистем - Google и Apple.

Настоящий конфликт у Роскомнадзора именно с ними. Все остальные действия - это из-за невозможности договориться всего лишь с этими двумя корпорациями.

Ссылки:
[1] https://www.reuters.com/article/us-spain-politics-catalonia-google/spanish-court-orders-google-to-delete-app-used-for-catalan-independence-vote-idUSKCN1C42JZ
[2] https://news.antiwar.com/2017/09/29/google-removes-catalan-referendum-app-on-spanish-court-order/
[3] https://appleinsider.com/articles/17/01/06/apple-forced-to-remove-linkedin-app-from-russian-app-store
[4] https://appleinsider.com/articles/17/01/04/apple-yanks-new-york-times-app-from-china-app-store-at-governments-behest
[5] https://www.cnet.com/news/apple-removes-secret-from-app-store-in-brazil/
[6] https://gadgets.ndtv.com/apps/news/apple-google-and-microsoft-ordered-to-remove-secret-app-in-brazil-578939

#telegram
Вот этот бот (анонс в фэйсбук) [1] мы делали давно и наконец-то сделали к концу года. Он умеет структурировано давать информацию по участию организации в получении госконтрактов и использует только открытое API Госзатрат.

Его можно опробовать по ссылке [2]
А API Госзатрат здесь [3]

В нем немного наших наработок по РобоЖурналистике или РобоАналитике, как не назови. Это самое начальное представление, того как можно автоматически создавать тексты с описанием, например, организаций. Бот работает очень просто. Ему кидается ИНН и по ИНН он формирует текст рассказывающей о контракт организации. Очень рекомендую тем что ищет ответы на вопросы: "Ты чей?", "Они чьи?", "Она чья?", "А они при ком?" и так далее.

Ссылки:
[1] https://www.facebook.com/clearspending/photos/a.485640574881032/1777006529077757/?type=3&theater
[2] https://t.iss.one/csParticipantStatsBot
[3] https://clearspending.ru/page/for-developers/

#opendata #clearspending #api #bots #telegram
Павел Дуров анонсировал [1] закрытие проект TON в довольно анти-американском стиле, критикуя решение суда в США. Честно говоря не знаю даже что добавить кроме тревоги за судьбу Телеграм'а, который, как я понимаю, из денег привлечённых на TON и финансировался.

[1] https://telegra.ph/What-Was-TON-And-Why-It-Is-Over-05-12

#blockchain #telegram
Slack, сервис корпоративных сообщений вступил в долгосрочное партнерство с Amazon [1] и будет улучшать свои возможности голосовой и видеосвязи с помощью Amazon Chime [2]. В первую очередь это связано с конкуренцией с Microsoft Teams.

На фоне этого всего у меня самый назревший вопрос - это почему Павел Дуров в Telegram до сих пор был занято исключительно массово потребительским продуктом. При наличии партнёрства или приобретения технологий на базе Telegram получился бы почти идеальный корпоративный мессенжер, механизмы его интеграции лишь немного уступают Slack'у (а может и превосходят) и это то за что компании реально были бы готовы платить.

При наличии у телеграма нормальной структуры управления, публичного юр. лица и так далее, конечно же.

Ссылки:
[1] https://www.theverge.com/2020/6/4/21280829/slack-amazon-aws-partnership-amazon-chime-voice-video-calls
[2] https://aws.amazon.com/ru/chime/

#messengers #slack #amazon #telegram
В сегодняшнем анонсе Павла Дурова о монетизации Телеграм [1], ожидаемый выход его платформы на конкуренцию со Slack за корпоративных пользователей. Хочется надеяться что стоимость аккаунтов в Slack снизится и он начнёт, наконец-то, развиваться.

Поэтому новость позитивная, вполне логичная модель развития для популярного мессенжера с огромным числом ботов и лояльной аудитории. Остаётся вопрос "легализации в России", потому что чем легальнее, тем больше нормативно-правового давления.

Ссылки:
[1] https://t.iss.one/durov_russia/29

#telegram #russia
Для тех кто пользуется телеграмом регулярно, поделюсь несколькими идеями продуктов которыми мне самому заняться всегда не хватало времени/мотивации/занятости. Да и специализация моя data engineering, что немного в другой области.

Первая идея весьма очевидная.

Аналог Slack/Element на базе Telegram

У телеграм'а есть сильное ограничение в числе каналов и чатов которые возможно поддерживать в одиночку. Больше чем на 20 каналов подписываться самоубийственное занятие, а чаты идут вперемешку рабочие и нерабочие и всякие. В этом смысле Slack или Element (Matrix) организованные по комнатам и сгруппированные по компаниям удобнее для корпоративного использования. В десктопном телеграме есть возможность группировать каналы и чаты, но, скажем так, довольно ограниченная.

Так вот востребованная штука - это сделать аналог Slack'а поверх телеграма. Почему так? Аналог Slack - это:
1. Способ организации рабочего пространства. В нем должны быть собраны все чаты команд, каналы команды и тд.
2. Автоматизированная архивация всей корпоративной переписки в чатах.
3. Корпоративный поиск по чатам (нужен поиск только по чатам в рамках определенной группы).
4. Иные возможности как у Slack'а

Почему Телеграм? Потому что он повсеместен. Сотрудники могут пользоваться корпоративным мессенжером или любым имеющимся, не так важно. Телеграм создает готовую инфраструктуру поверх которой может быть построено полноценное рабочее пространство.


Конечно, идеально было бы если бы в самом телеграм'е эти опции были бы вшиты, у корпоративной версии было бы платящих немало клиентов. Тех кто для коммуникаций команды сейчас выбирает между Mattermost и Element.

#ideas #tech #telegram
Кстати, очень серьезный вопрос.

Я вот всё не могу понять феномена Телеграма сейчас. Почему он и в России не забанен, и Дуров не под санкциями? Тут же всех видов пропаганды в достатке. А нейтральными сейчас не позволяют быть никому. А еще тут российские госорганы обжились словно навсегда, каналов и чатов насоздавали, перестали Телеграм импортозамещать.

Когда будет разоблачение и что в нем будет?

#telegram
Если бы я не знал Python, я бы выучил язык R. Для работы с данными - это, пожалуй, два наиболее актуальных и полезных языка для разработчиков и аналитиков. Но, если Python создавался изначально как язык общего назначения, то R именно как язык для изучения аналитиками. Ему, например, обучают сотрудников Счетной палаты Индии, во многом из-за простоты обучения

Я лично почти ничего не пишу об этом языке, но это не значит что у R нет большого сообщества и большой востребованности.

Среди авторов я лично могу порекомендовать Алексея Селезнева и его канал R4Marketing

Алексей пишет кратко и доходчиво, это как раз Телеграм формат.

P.S. А если Вы ещё не определились изучать Python или R, рекомендую посмотреть обзор Python vs R на DataCamp

#recommendations #telegram #rlang
В The Verge статья [1] о том что Элон Маск собирается перезапустить механизм прямых сообщений в Twitter и дать возможность обмениваться зашифрованными сообщениями, аудио и видео и тд. И даже собираются сотрудничать с командой Signal в этой задаче. Звучит как конкурент как раз Signal, WhatsApp, Telegram (?), но от Элона Маска.

Может ли Twitter пройти такое преобразование? Почему бы и нет, тогда и логика с платностью аккаунтов и премиумом будет иметь больше пространств для расширения возможностей.

Иначе говоря, если Twitter сможет превратиться аналог в Telegram, то у Telegram՛а появится сильный конкурент. Хотя о чём я, скорее Telegram станет ещё более прямым аналогом Twitter'а ;)

Ссылки:
[1] https://www.theverge.com/2022/11/21/23472174/twitter-dms-encrypted-elon-musk-voice-video-calling

#twitter #telegram #tech #privacy
С чем у Минцифры РФ хорошо, так это с самокритикой. Они тут составили подборку телеграм каналов, критично настроенных, в том числе, к их работе. Это не значит что я лично стану менее или более критично писать в их адрес.

Для свежеподписавшихся напомню что я в этом телеграм канале пишу открытые данные, инженерию данных, технологии в государстве, технологии в принципе, приватность, ИИ (взглядом через данные), цифровое сохранение, о том где находить данные, с помощью каких инструментов с ними работать.

Пишу я не только и не столько в контексте России, но и про другие страны.

На русском языке я также веду рассылку с лонгридами, а на английском языке блог в Medium

Телеграм канал я изначально вел и во многом веду как свод регулярных заметок о том что читаю, над чем работаю, о чём пишу и тд. поэтому все ппосты здесь в телеграм канале снабжены тегами облегчающими навигацию.

#blogging #telegram
Please open Telegram to view this post
VIEW IN TELEGRAM
В качестве регулярных напоминаний, помимо этого телеграм канала я время от времени пишу на других площадках:
- рассылка лонгридов на Substack на русском языке https://begtin.substack.com/
- блог в Medium на английском языке https://medium.com/@ibegtin
- в Фэйсбук'е https://www.facebook.com/ibegtin (почти дублируется с телеграм каналом)
- в VK https://vk.com/ivbeg пишу сильно реже, мне как и многим эта соцсеть не нравится, но часть аудитории там.

А также другие телеграм каналы:
- Инфокультура https://t.iss.one/infoculture с анонсами проектов и новостями АНО Инфокультура
- Национального цифрового архива https://t.iss.one/ruarxive о архивации цифрового русскоязычного и российского контента
- проекта Госзатраты https://t.iss.one/clearspending - ведут мои коллеги в Инфокультуре, в основном туда роботы постят инфу про интересные госконтракты. Вот уже много лет
- Open Data Armenia https://t.iss.one/opendatam - телеграм канал Open Data Armenia, армянской НКО которую я возглавляю (Yes hay em) и где на трёх языках: английском, армянском и русском про открытые данные в Армении


#readings #opendata #russia #armenia #telegram
Отвлекаясь немного от темы данных и технологий.

В Испании Верховный суд постановил временно заблокировать Телеграм после жалобы группы "копирастов" из ведущих медиа компаний: Mediaset, Atresmedia, Movistar и Egeda на то что в Телеграм'е пиратят и не удаляют спираченный у них контент [1].

Не менее важна причина решения суда, главный аргумент в "недостаточной кооперации" со стороны руководства Телеграма, непонятно ли кооперация с кем, с властями страны или с владельцами контента.

В любом случае, блокировкой Телеграма, Испания присоединилась к клубу стран состоящему из Кубы, Ирана, Пакистана и Таиланда.

Что тут скажешь, пора испанцам перенимать иранский опыт по обходу блокировок соцсетей.

Ссылки:
[1] https://www.euronews.com/next/2024/03/23/spains-high-court-orders-block-on-telegram-messaging-app-as-a-precautionary-measure

#privacy #piracy #telegram
Не так страшны законы как их беззаконное применение (с)
По поводу свежего законопроекта по которому все телеграм каналы/блоггеры 10 тысячники должны регистрироваться в РКН, я так скажу.

Ключевое в том как его будут применять. Во первых, Россия != русский язык, а русский язык != Россия. Русскоязычные телеграм каналы могут вестись где угодно в мире и ориентироваться на теперь уже особенно широкую диаспору. Их авторы могут иметь паспорта Канады, Испании, Израиля, Армении и десятков других стран. Их авторы могут уже вообще не иметь связи с РФ. Так по какому критерию РКН будет и сможет соотносить их с Россией?

По аудитории? Телеграм не даёт её в разбивке по странам. По гражданству владельца ? А откуда бы у них такая инфа? По коду телефонного номера? Так и он может быть не российским. Более того у телеграм канала может быть много админов и много авторов, иногда десятки авторов, тут то как быть?

Ещё важно помнить что телеграм каналы - это не сайты/домены. Заблокировать их нельзя, платформа не позволяет такое.

Поэтому знаете какой самый основной критерий получается ? По размещению рекламы российских юр. лиц и ИП. Это то что может ударить по карману тех русскоязычных телеграм канало владельцев которые зарабатывают на рекламе из РФ и на аудиторию в РФ.

У меня до 10 тысяч подписчиков немало, но желания размещать рекламу как не было так и нет. Выгода от разговора с профессиональной русскоязычной аудиторией разбросанной по всему миру перевешивает рекламные деньги с лихвой.

Поправьте меня если я неправ.

#blogging #thoughts #telegram #regulation