➡️ Про необходимость и боль перехода с IBM MQ + RH Fuse на Apache Kafka + Apache Camel расскажет Александр Крылов, Lead DevOps services в ПАО СК Росгосстрах
⠀
📋 https://bx.vc/uhtu5u
⠀
Александр с командой попали в ситуацию, когда они имеют инструменты, попадающие не только под vendor lock и узкую компетенцию, но и санкции. Речь про так называемую шину данных или ESB, состоящую из брокера очередей на базе ESB IBM MQ и интеграционного слоя на базе Red Hat JBoss Fuse.
⠀
Александр поделится с нами той болью, которую они получили на стеке описанных выше инструментов при необходимости как масштабироваться, так и заменять их из-за утраты компетенций и необходимости уйти от vendor lock по компаниям в списке санкций.
Собрав всю силу и необходимые компетенции, они выбрали инструменты Apache Kafka в качестве брокера очередей и Apache Сamel в качестве интеграционного слоя для построения потоков данных.
⠀
✋ Встречаемся 22 и 23 сентября в Петербурге
⠀
✅ Программа Saint HighLoad++ и билеты по ссылке - https://bx.vc/1n0vor

👋 Геолокация при помощи триангуляции по сотовым вышкам в прошлом! Артем Кравчук расскажет про геолокацию по WiFi/GSM в больших городах на базе ML для 30-ти миллионов пользователей
⠀
📋 https://bx.vc/cv508h
⠀
Крупные города содержат миллионы Wi-Fi-точек. Современные статистические методы позволяют рассчитывать честные двумерные карты сил сигналов, а современные инженерные приёмы — строить сотни миллионов таких карт и использовать для позиционирования десятков тысяч пользователей в секунду. Подход команды Артема позволил улучшить точность геолокации по Wi-Fi/GSM более чем в 2 раза там, где GPS неточен или недоступен.
⠀
Из доклада узнаем, как симбиоз data science и инженерных решений позволил построить экономную по аппаратным ресурсам систему силами небольшой команды для 30+ М пользователей c нагрузочной ёмкостью 10K+ RPS.
⠀
📍 Ждем вас 22 и 23 сентября на Saint HighLoad++
⠀
✅ Программа конференции и билеты здесь - https://bx.vc/lgwjaa

⚡️ Успейте забронировать билеты до 31 августа
⠀
✋ Друзья, с 1 сентября цена билетов на конференцию Saint HighLoad++ повысится до своей максимальной отметки. Но у вас есть возможность зафиксировать текущую стоимость, если забронируете билеты сейчас. После брони у вас еще будет несколько дней для оплаты.
⠀
Ждем вас на единственной профессиональной конференции для разработчиков high-load систем, где вы узнаете максимальные пределы технологии, вдохновитесь идеями и получите мощный заряд положительной энергии 💥
⠀
✅ Забронируйте билет здесь - https://bx.vc/c045ng

🔹 Языки программирования: прошлое, настоящее и будущее обсудим с Дмитрием Завалишиным на Saint HighLoad++
⠀
📋 https://bx.vc/tr72e6
⠀
Качество и ценность языков программирования обычно рассматриваются с точки зрения возможностей языка, применимости его в той или иной парадигме разработки. То есть обсуждается ценность с точки зрения программиста. Причем, как правило, ценность сиюминутная, в момент изначального написания программы.
⠀
Вместе с Дмитрием рассмотрим языки в исторической перспективе в разрезе экономики процесса программирования. Мы будем оценивать технические свойства ЯП в приложении к стоимости разработки программных систем. В первую очередь, стоимости не сиюминутной, а долговременной. Рассматриваются, в основном, языки, которые широко применяются в разработке и некоторые из претендентов.
⠀
Встречаемся в Санкт-Петербурге 22 и 23 сентября 🙌
⠀
✅ Прочитать подробно о конференции и купить билеты по ссылке - https://bx.vc/j8d1bb

От 0 до 200000000 игроков - об эволюции бэкенда за 40 мин. узнаем из доклада Андрея Михеева
⠀
📋 https://bx.vc/cl90nr
⠀
War Robots — мультиплеерный 3D-шутер. Недавно ему исполнилось 8 лет, и за время существования проекта архитектура претерпела множество изменений. Поначалу она была очень простой и строилась на облачных решениях: на бэкенде был всего один сервис, который отвечал за работу с профилями игроков, а сама игра была реализована с помощью облака Photon. Но уже тогда в качестве хранилища данных была выбрана Cassandra, что сделало архитектуру проекта довольно нестандартной.
⠀
Со временем многократно выросли нагрузки, количество игроков перевалило за 200 000 000, размер хранилища вырос до 80 Тб (!) данных, серверов стало более 150, да и команда прокачалась и выросла.
⠀
Андрей расскажет о развитии архитектуры бэкенда игры, зачем и когда требовалось её существенное изменение.
⠀
✅ Программа конференции и билеты по ссылке – https://bx.vc/wuzd1w
⠀
До встречи 🖐

💥Когда вы становитесь очень большими, у вас появляется множество команд, которые реализуют различные блоки функциональности. При разработке разной функциональности довольно часто нужно разрабатывать также и инфраструктурные инструменты, при этом каждая из команд пишет свою версию такого инструмента.
⠀
Выход из ситуации - разделение разработки на инфраструктурную (платформенную) и продуктовую.
⠀
➡️ В программе Saint HighLoad++ 2022 целый блок докладов про построение платформенной разработки:
⠀
1) Одна платформа, чтобы править всеми. Михаил Кабищев (Ozon) https://bx.vc/vzog96
⠀
2) Как мы в 1С делаем свой PaaS. Басель Дарвиш (1С) https://bx.vc/pf7nta
⠀
⤵️

3) Вторая космическая: как преодолеть притяжение внутренней платформы разработки и выйти в открытый код. Анастасия Абрашитова (Яндекс) https://bx.vc/fy6lag
⠀
4) Technical governance IDP (Internal Developer Platform) для 7000 разработчиков. Дмитрий Гаевский (Тинькофф) https://bx.vc/s064gm
⠀
5) "Канал. Продукт. Платформа" или эволюция подходов к развитию мобильного банка Тинькофф. Александр Поломодов (Тинькофф) https://bx.vc/cw0fhi
⠀
Ждем вас 22 и 23 сентября в Санкт-Петербурге 🙌
⠀
✅ Программа конференции и билеты по ссылке - https://bx.vc/d6jy2z

🔹 ERP-проект на десятки тысяч пользователей. Боимся и делаем! Как? Расскажет Алексей Кислов, директор департамента развития практики ERP фирмы «1С»
⠀
📋 https://bx.vc/ypbxsg
⠀
Из доклада Алексея узнаем их историю из практики — от старта проекта до организации поддержки. «Проектные грабли» и варианты решения проблем на каждом этапе. Разработка корпоративного шаблона — бутерброд из трех котлет. Централизация против локальных процессов. Как «готовить» мозги и руки в рамках корпоративного ERP-проекта. Проект нельзя закончить — сопровождение, развитие и работа с релизами.
⠀
🙌 Встречаемся 22 и 23 сентября в Петербурге на Saint HighLoad++
⠀
✅ Программа конференции и билеты по ссылке - https://bx.vc/uosnu2

Про оптимизацию стоимости хранения данных в объектном хранилище, или когда больше==меньше узнаем из доклада Виталия Исаева
⠀
📋 https://bx.vc/coq2b6
⠀
Виталий с командой воспользовались методами black-box-оптимизации, чтобы определить комбинацию настроек, соответствующую минимальной стоимости хранения, и выяснили, что минимальное и максимальное значения стоимости могут отличаться на 1 порядок: цена выбора неправильных настроек очень высока. При этом применение настроек, которые интуитивно кажутся более логичными и правильными, зачастую приводит к неоптимальной стоимости хранения данных.
⠀
В ходе доклада мы рассмотрим:
⠀
- архитектуру современного объектного хранилища;
- методы оптимизации, подходящие для поиска оптимальных настроек и исследования эффективности программных систем;
- практический пример оптимизации стоимости эксплуатации объектного хранилища.
⠀
✅ Программа конференции и билеты по ссылке – https://bx.vc/l0ptcw
⠀
До встречи ✋

🕹 Из доклада Александра Сербула узнаем про распределенный высоконагруженный BI-движок для Google Data Studio и Microsoft Power BI - как сделать массовую облачную BI-аналитику доступной для человечества
⠀
📋 https://bx.vc/yll125
⠀
Александр расскажет, как проектировали, разрабатывали и запустили на сотни тысяч компаний облачную BI-аналитику для инструментов Google Data Studio и Microsoft Power BI. Поговорим об ошибках, подводных камнях, выборе column-ориентированных хранилищ от Druid и Pinot до ClickHouse и Amazon RedShift. Затронем инструменты BI-визуализации от Apache Superset до Amazon QuickSight и Яндекс DataLens.
⠀
Не обойдем стороной вопрос гетерогенной репликации данных, CDC-репликации и приручения Kafka и Amazon Kinesis. Разберем основы создания простых и полезных, но, главное, быстрых облачных BI-отчетов для компаний-пользователей CRM Битрикс24.
⠀
🙌 Присоединяйтесь к нашей тусовке на Saint HighLoad++ 22 и 23 сентября в Питере.
⠀
✅ Программа конференции и билеты по ссылке - https://bx.vc/eedbj1

➡️ Антон Колесов расскажет, как они защищают при перегрузках миллионы клиентов посредством динамического троттлинга в высоконагруженных системах
⠀
📋 https://bx.vc/9r01na
⠀
Антон с командой часто сталкивались с проблемами, когда излишняя нагрузка на один компонент системы может влиять на другие, причем на первый взгляд не очень-то и связанные. В особо тяжелых случаях подобные перекрестные влияния могут начать каскадно утягивать за собой в недоступность значимые части комплекса.
⠀
- Как обезопасить себя и свои сервисы от разрушительных последствий сбоев или перегрузок?
- Как автоматически выявить деградирующую по производительности функцию API и что с ней делать дальше?
- Какие стратегии троттлинга уместно применить в случае с частыми перегрузками компонентов в распределенной системе?
⠀
Узнаем ответы на эти и другие вопросы из доклада Антона, также коснемся темы, как данное решение эксплуатируется и мониторится.
⠀
До встречи 22 и 23 сентября 🙌
⠀
✅ Программа конференции и билеты по ссылке - https://bx.vc/3vms08

🔺Внимание
⠀
С 1 сентября финальное повышение цены билетов на конференцию Saint HighLoad++, а это значит, что цена станет максимальной. Но вы можете зафиксировать текущую стоимость, если забронируете билеты до 31 августа. После брони у вас будет еще несколько дней для оплаты.
⠀
В программе Saint HighLoad++ 2022:
⠀
▪️Самые интересные и актуальные темы: Архитектуры, масштабируемость; Базы данных и системы хранения; Технологии будущего; Платформенная разработка; Фейл-секция и другие
▪️80 докладов
▪️5 потоков

⠀
✅ Узнать программу подробнее и забронировать билет здесь – https://bx.vc/kh5clu
⠀
Встречаемся 22 и 23 сентября в Санкт-Петербурге и онлайн по всему миру 🙌

Про эволюцию распределенных атак в Интернете: 1994 - настоящее время узнаем из доклада Георгия Тарасова, владельца продукта Bot Protection в Qrator Labs
⠀
📋 https://bx.vc/tqxw8k
⠀
Предметная область работы команды Георгия предполагает изучение DDoS-атак, бот-активности и методов их реализации.

Из доклада узнаем:

- о путях развития DDoS с важнейшими временными вехами как с точки зрения техники, так и в публичном восприятии проблемы: Panix, Sony, XboxLive/PSN, Mirai, memcached, а также значимые случаи в Рунете
- как параллельно с DDoS возникал и развивался инструментарий для парсинга веб-страниц и API, создавались боты для скрэпинга и росла их массовость
- о технологиях и новшествах, которые улучшают нашу жизнь в Интернете и открывают новые пути для DDoS и бот-атак
- об уроках, которые преподнесла история, и выводах, которые удалось сделать из 11-летнего опыта Георгия в данной сфере
⠀
✋ Ждем вас 22 и 23 сентября на Saint HighLoad++
⠀
✅ Программа конференции и билеты на сайте - https://bx.vc/2heu5z

🔥 Друзья, уже через 3 недели мы встретимся с вами в Питере. Каждый год у нас на площадке собираются лучшие специалисты IT-отрасли, чтобы обменяться знаниями о технологиях, решить насущные профессиональные задачи и зарядиться мощной энергией.
⠀
➡️ В программу приняты только лучшие доклады на самые интересные и актуальные темы отрасли. И сегодня представляем вам следующую подборку докладов Saint HighLoad++ 2022, на этот раз в категории «Самые ожидаемые доклады»
⠀
1) Как выжить под нагрузкой, имея 100ТБ в нешардированной MongoDB. Андрей Комягин (STM Labs) https://bx.vc/cmdvbh
⠀
2) OpenSource как источник атаки. Чем опасно? Как лечить? Алексей Морозов (Тинькофф) https://bx.vc/0e90f6
⠀
3) Микросервисы через боль и превозмогание. Филипп Дельгядо (lekton.io) https://bx.vc/w21hjq
⠀
⤵️

4) Общий флоу разработки в Ozon. Как сделать жизнь разработчиков проще? Даниил Разумов (Ozon) https://bx.vc/l5om5c
⠀
5) «ML свадьба» между миллионами товаров, или как выдержать нагрузку в потоке. Ван Хачатрян (Ozon) https://bx.vc/gsrkgp
⠀
6) OK S3: Строим Систему Сами. Вадим Цесько (Одноклассники) https://bx.vc/jqo3wp
⠀
7) Распознавание речи для субтитров в VK Видео. Виталий Шутов (ВКонтакте) https://bx.vc/xfi3rb
⠀
✋ Ждем вас 22 и 23 сентября в Санкт-Петербурге - https://bx.vc/i1loa6

🔹 Дедупликация 5 миллионов событий в секунду на YDB в АппМетрике – тема доклада Артема Исмагилова
⠀
📋 https://bx.vc/3d15tm
⠀
Артем кратко расскажет про конвейер обработки событий аппметрики:
⠀
- какие задачи он решает;
- общая архитектура: примерно 50 микросервисов, передающие информацию через ClickHouse и ZooKeeper;
- нагрузка в числах — 250 миллиардов событий в день, до 7 миллионов RPS в пике;
- зачем нужен сервис дедупликации.
⠀
Про сервис дедупликации узнаем:
⠀
- как была устроена прошлая версия сервиса: физические сервера с состоянием в оперативной памяти, сохраняемым на диск и самодельной репликацией;
- подходы к реализации новой версии, которые рассматривали;
- почему выбрали именно YDB для реализации новой версии сервиса;
- с какими трудностями столкнулись и как их преодолели;
- как уменьшили нагрузку на YDB в 10 раз, добавив фильтр блума в виде отдельной таблицы YDB;
- что еще предстоит сделать.
⠀
✅ Программа конференции и билеты здесь – https://bx.vc/v8qdsb
⠀
До встречи в Питере 🙌

✋ Владимир Меркулов и Василий Вологдин расскажут, как они подружили биореакторы и ML
⠀
📋 https://bx.vc/vo1m77
⠀
Когда речь заходит о машинном обучении в фармацевтических компаниях, таких как BIOCAD, то большинство специалистов подразумевает участие Data Scientist'ов в процессе разработки лекарственных препаратов. В докладе Владимир и Василий посмотрят на этот вопрос немного под другим углом и расскажут о том, какие еще задачи решаются при помощи машинного обучения в фармацевтических компаниях, в том числе как алгоритмы машинного обучения помогают решать задачи на производственных линиях и какую архитектуру они для этого используют.
⠀
Также узнаем о том, с какими трудностями они столкнулись при разработке, и каким образом выстраивалось взаимодействие между специалистами службы АСУ ТП и специалистами по машинному обучению.
⠀
Ждем вас 22 и 23 сентября в Петербурге 🙌
⠀
✅ Программа конференции и билеты здесь - https://bx.vc/0kh5bt

👉 Без АВ - результат ХЗ или как мы построили платформу АВ-тестов в Ozon – расскажет Евгений Пак
⠀
📋 https://bx.vc/qzoaf0
⠀
Евгений расскажет про техническую реализацию платформы А/B-тестов в компании Озон. А именно:
⠀
- об эволюции A/B-тестов в компании. О том, как они шли от простого к сложному длиной в несколько лет;
- как построена архитектура платформы A/B-тестов в общей экосистеме Ozon;
- как они обеспечили интеграцию любого сервиса в компании. Интегрировано более 150 сервисов, причем каждый сервис работает с уникальным набором атрибутов для тестирования;
- и даже секрет молниеносного ответа при высоком RPS. Каждый запрос на сайт Ozon.ru идет в платформу A/B-тестов, а вы этого даже не замечаете.
⠀
Также узнаем о том, как платформа A/B-тестов повлияла на бизнеc-процессы важнейших направлений компании. Так как это не просто технический инструмент, а путь продуктового мышления.
⠀
✅ Узнать программу конференции и купить билеты по ссылке – https://bx.vc/wl5s3i
⠀
До встречи 🙌

🔹 Общий флоу разработки в Ozon. Как сделать жизнь разработчиков проще? Обсудим с Даниилом Разумовым
⠀
📋 https://bx.vc/cevs1u
⠀
Тезисы доклада:
⠀
- Рассказ о том, как раньше жили разработчики в Ozon и почему жить было не так просто.
- C чего начали проектировку общего flow разработки.
- Как все устроено внутри архитектурно.
- Как внедряли flow и с какими проблемами столкнулись при разработке и внедрении.
- Что изменилось и что стало лучше?
- Сделаем выводы, что стоит использовать, а на какие грабли лучше не наступать.
⠀
📍Ждем вас на Saint HighLoad++ 22 и 23 сентября
⠀
✅ Программа конференции и билеты здесь - https://bx.vc/g3lux5

💥 Евгений Россинский из ivi, участник Программного комитета Saint HighLoad++, в коротком интервью отвечает на вопросы:

- Что для Вас значит конференция HighLoad++
- Что сейчас заботит разработчиков? Какие вызовы и перспективы
- Какую пользу от конференции Вы получили
- Что запомнилось и впечатлило больше всего

✅ Ждем вас 22 и 23 сентября на Saint HighLoad++ 2022 https://bx.vc/wn4tem