HighLoad++
6K subscribers
2.28K photos
137 videos
15 files
2.12K links
Официальный канал профессиональной конференции разработчиков высоконагруженных систем

Встречаемся 6 и 7 ноября в Москве на HighLoad++ 2025: https://highload.ru/moscow/2025

Общаемся в чатике https://t.iss.one/HighLoadTalks
Download Telegram
Современные базы данных. Как выбрать СУБД в 2023? Узнаем из доклада Олега Бондаря


Олег расскажет про актуальный сложившийся ландшафт на рынке СУБД, постарается дать объективный взгляд на ряд известных решений. Также расскажет про продукты Яндекса с открытым кодом в области БД, в том числе на совсем свежие продукты, которые станут актуальны на момент проведения конференции. Основной акцент будет на решениях с открытым исходным кодом, то есть на СУБД, которые каждый может использовать у себя.

На фоне роста данных за последние пару десятилетий на рынке сложилась интересная картина. С одной стороны, появляется множество решений поверх традиционных СУБД, и сами производители этих СУБД не стоят на месте, с другой стороны, появляются совершенно новые продукты.

В докладе Олег хочет рассмотреть разность и общность подходов производителей СУБД к решению таких проблем, как достижение отказоустойчивости и масштабируемости, предоставление гарантий консистентности. Возможности и компромиссы, которые встречаются в различных решениях.

В завершение доклада подискутируем на тему того, куда все идет:

- стирается грань между OLTP и OLAP;
- хочется скорей просто взять базу, нагрузить операционной нагрузкой и одновременно с этим сделать аналитический (произвольный) запрос, который ее не сложит;
- данных все больше, нужно удешевлять хранение — даже в операционных базах все идет к тому, что нужен автоматический тиринг данных и хранение холодных данных в S3-подобных хранилищах (уже есть у многих облачных аналитических решений).

До скорой встречи на Saint HighLoad++ 2023 🙌

Программа конференции, расписание и билеты здесь @HighLoadChannel
👍9🔥51
This media is not supported in your browser
VIEW IN TELEGRAM
🔥5🎉31👍1
Как при помощи бумаги, карандаша и алгоритма Raft достичь консенсуса? Узнаем на воркшопе в необычном формате от Ярослава Дынникова 🙌


Программа, расписание и билеты на Saint HighLoad++ 2023 на сайте в описании канала @HighLoadChannel
2🔥1👏1💯1
О поставке данных телеметрии складского робота, и что с этими данными можно сделать расскажет в своем докладе Николай Долганов


Для автоматизации складов и других офлайн-объектов Маркета в Яндексе разрабатывают роботов. Каждый робот — сложная система с большим количеством вычислителей, сенсоров и исполнительных устройств, которую невозможно подключить шнурком к ДЦ.

На докладе Николая рассмотрим, как на существующих инструментах в очень сжатые сроки была построена совершенно новая технология телеметрии мобильных роботов, которая помогает им разрабатывать и поддерживать их.

Обсудим:

- с какими проблемами сталкиваются разработчики устройств, удаленных от инфраструктуры ДЦ;
- как быть с большими объемами данных для обучения и отладки;
- какие хранилища Яндекса пригодятся для решения подобных задач (на примере хранилищ Яндекса, ныне доступных не только внутри него);
- чем могут быть полезны данные с роботов: обслуживание инцидентов, обнаружение аномалий, предсказание отказов.

Также доклад будет полезен тем, кто еще только определяется с технологиями и хранилищами для собственных проектов телеметрии (необязательно мобильных) устройств.

Встречаемся 26 и 27 июня на Saint HighLoad++ 2023 🙌

Ознакомиться с программой конференции и купить билет можно на сайте в описании канала @HighLoadChannel
🔥3👍21👏1
Дмитрий Шишов в своем докладе поделится переосмыслением рекомендаций в Дзене и внедрением item-to-item-схемы


Дзен — крупная мультиформатная контентная платформа с персональной лентой рекомендаций, в которой пользователю предлагаются статьи, видео, посты и ролики от сотен тысяч авторов.

Доклад будет посвящен их пути к построению объяснимой для пользователей персональной ленты и способу сделать рекомендации «контролируемыми». Дмитрий расскажет, какие ограничения они себе поставили для этого и почему в их рамках пришли к item-to-item-модели, как решают задачу построения таких рекомендаций, какие возможности им это открыло, а также про основные этапы внедрения и развития item-to-item-технологии.

🖐 Ждем вас 26 и 27 июня на Saint HighLoad++ 2023 в Питере

Программа конференции, расписание и билеты на сайте в описании канала @HighLoadChannel
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4👍2🆒21
This media is not supported in your browser
VIEW IN TELEGRAM
🔥4🎉31💯1
Путь, пройденный командой развития Сбербанка Онлайн при построении надежной и отказоустойчивой архитектуры слоя хранения, является уникальным, и опыт, полученный в процессе становления, может стать подспорьем для развивающихся проектов, идущих прямиком в «клуб HL++». Об этом доклад Ильи Кайшаури


Программа Saint HighLoad++ 2023 и билеты на сайте в описании канала @HighLoadChannel
Please open Telegram to view this post
VIEW IN TELEGRAM
👍41
Сегодня поговорим о практиках оптимизации производительности запросов в ClickHouse.

Разработчик ClickHouse Максим Кита раскроет ниндзя-техники, которые ускорят ваши системы.., но начнем по порядку.

Детально рассмотрим CI/CD-инфраструктуру ClickHouse, как с ее помощью тестируют на регрессии, находят медленные запросы и места, которые надо оптимизировать. Какие компиляторы и версии библиотек применяют для тестирования в самом ClickHouse. Поговорим о дизайне высокопроизводительных систем, выборе библиотек и различных трюках для ускорения производительности. Будет много примеров!

📍Читать статью в нашем блоге на Habr: https://habr.com/ru/companies/oleg-bunin/articles/726570/
👍3
⚡️Друзья, при поддержке генерального партнера Garage Eight на Saint HighLoad++ 26 и 27 июня пройдет открытая трансляция главного зала. Доступно абсолютно всем, просто подключайтесь и смотрите лучшие выступления.

Подробности, расписание и подключиться здесь: https://free-track.highload.ru/?utm_source=tg&utm_medium=post&utm_campaign=anons&utm_content=otkrytyitrek

До встречи в эфире 🖐️
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥73👏2🎉1
This media is not supported in your browser
VIEW IN TELEGRAM
🔥63🤩21😢1
⚡️Друзья, на Saint HighLoad++ 2023 все офлайн-билеты проданы! Но у вас еще есть возможность присоединиться к нам онлайн

Для онлайн-участников будут доступны:

- Все презентации спикеров
- Видеозаписи всех докладов
- Трансляция всех докладов. Митапы и воркшопы не транслируются️
- Вопросы к спикерам в telegram-чате
- Доступ к трансляции для одного пользователя

Купить онлайн-билет – https://highload.ru/spb/2023?utm_source=tg&utm_medium=post&utm_campaign=anons&utm_content=offlinesoldout

Ждем вас в эфире 26 и 27 июня 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥31💯1
На Saint HighLoad++ 2023 в рамках трека «Архитектура. HighLoad & VK» пройдет «Прожарка архитектурных кейсов»

Топовые эксперты прямо во время конференции разберут архитектурные решения участников и найдут все изъяны. Но не волнуйтесь — никто не уйдёт без идеи, как исправить ситуацию.

Первый кейс:

Проектирование сервиса мониторинга самолетов в реальном времени от Владимира Смирнова, Елизаветы Неледовой и Карины Коноплевой


Знаменитый Flightradar показывает в реальном времени положение всех самолетов мира миллионам пользователей, но как ему это удается?

Основную нагрузку создает необходимость довольно быстро отрисовывать обновления в положении самолетов у всех пользователей-наблюдателей, а это, при заявленной средней нагрузке в 3'000'000 пользователей, не меньше 150ГБ данных в секунду. А ведь данные нужно еще и обновлять. Какая база справится с такими объемами? А может ей и не нужно с этим справляться? В этих вопросах они постарались разобраться вместе с командой и с радостью выскажут свои мысли. Подробно разберем проблемы, с которыми столкнулись, и выслушаем любую критику.

До скорой встречи!

Программа трека "Архитектура. HighLoad & VK" на сайте в описании канала @HighLoadChannel
Please open Telegram to view this post
VIEW IN TELEGRAM
👍51🔥1
This media is not supported in your browser
VIEW IN TELEGRAM
🔥7🎉3❤‍🔥22
До конференции осталось 2 дня 🙌
🎉123👍3
Архитектурный вынос магазина – кейс от Евгения Бабы для «Прожарки архитектурных кейсов», которая пройдет в рамках трека «Архитектура. HighLoad & VK»


Разделение системы на несколько максимально независимых компонентов/сервисов для устранения проблем монолита:

- ограниченный стэк технологий
- сложность контролировать четкость абстракций
- legacy код
- проблемы с ответственностью
- релиз монолита
- долгий time to market фич

До скорой встречи на Saint HighLoad++ 2023 🖐️

Полная программа трека «Архитектура. HighLoad & VK» здесь: @HighLoadChannel
Please open Telegram to view this post
VIEW IN TELEGRAM
31👍1
This media is not supported in your browser
VIEW IN TELEGRAM
🔥62🎉1
Застройка продолжается 🖐️
🔥15💯4
This media is not supported in your browser
VIEW IN TELEGRAM
🔥92👍2🥰1🤩1
This media is not supported in your browser
VIEW IN TELEGRAM
🔥7🙏1👌1
Архитектура приёмки товаров на складах – кейс от Руслана Сафина для «Прожарки архитектурных кейсов», которая пройдет в рамках трека «Архитектура. HighLoad & VK»


Система на вход принимает документы, которые нужно сопоставить с фактическим наличием товаров — произвести пересчет, сверку, проверку на брак и т.д.

Отдельным требованием стоит реализация всех бизнес-процессов на BPMN-движке. Процессы достаточно сложные и развесистые — в зависимости от типов и параметров документов, физический процесс сверки и актуализации производится по-разному.

В проекте выделены 2 мастер-системы: задачи и накладные. Разделение произведено в соответствии с контуром видимости: накладные — это внешняя сущность, задачи для сотрудников — внутренняя сущность, имеющая смысл только в замкнутом контуре проекта.

Все интеграции с внешними системами реализованы через ACL, взаимодействие со всеми видами фронта — через BFF.


Полная программа трека «Архитектура. HighLoad & VK» на сайте в описании канала @HighLoadChannel
Please open Telegram to view this post
VIEW IN TELEGRAM
👍53