💥Мы продолжаем раскрывать тематику обоих HighLoad++ этого года. Сегодня речь пойдёт об архитектуре, архитектурных паттернах и проектах, интересных с точки зрения архитектуры.

1️⃣Что интересно Программному комитету в плане архитектур?
🔹Serverless, No Code.
🔹Микросервисы.
🔹Аутентификация.

2️⃣В тематике «IT в оффлайне» нам интересно всё то, что происходит в реальной жизни:
🔹Телемедицина, ML в медицине.
🔹Телеметрия в кикшерингах.
Космос.
🔹Системы реального времени (например, экипировка Ратник).

3️⃣Архитектуры интересных проектов
🔹Интересно было бы узнать об архитектуре ClubHouse, Почтатех и других подобных систем.
🔹ML в рекламе и retail.
Истории провалов.
Qualys Community.
CPU vs GPU.

Подробнее о направлении — в письме Олега Бунина. Веб-версия письма — по ссылке.

⚡️Напоминаем ключевые даты.
На Saint HighLoad++ 2021 подача доклада теперь возможна только по согласованию с ПК. 5 августа будет принято решение по докладам.

На HighLoad++ 2021 приём докладов открыт до 2 сентября, принятие решения — 9 сентября.

20-21 сентября HighLoad++ пройдёт в Петербурге.
25-26 ноября — в Москве.

⏰И напоминалка для тех, кто предпочитает сидеть в зрительном зале: в это воскресенье, 1 августа, цены вырастут.

Александр Демичев — разработчик в компании Red Hat и постоянный контрибьютор в Openshift и Kubernetes. На Saint HighLoad++ 2021 Александр покажет, как сделать Kubernetes проще. Рассмотрим декларативные API и инструменты для автоматизации развертывания и сопровождения жизненного цикла отдельных узлов и целых кластеров OpenShift.👇
https://www.highload.ru/spb/2021/abstracts/7646

✅Напоминаем — осталось 3 дня до повышения цен на петербургский и московский HighLoad++. Билеты и тезисы докладов:

Saint HighLoad++ 2021👇
https://www.highload.ru/spb/2021
HighLoad++ 2021👇
https://www.highload.ru/moscow/2021

👨‍🚒Давайте честно — shit рано или поздно happens. И когда он happens, есть большое искушение замести всё под ковёр, сделать poker face и сказать: «Вам показалось». Во что может вылиться такое поведение при инцидентах — это отдельный вопрос.

Сегодня поговорим о том, как действовать в таких случаях «по-взрослому». На HighLoad++ Весна 2021 Виктор Попов (X5 Retail Group) рассказал, как правильно организовать работу с инцидентами и что нужно сделать ещё на берегу, чтобы искра не превратилась в неуправляемый пожар.

✅Ближайший HighLoad++ пройдёт в Петербурге, 20-21 сентября. Билеты и тезисы докладов здесь.

💥Разрабатывая микросервисную архитектуру с нуля outsource-команды часто сталкиваются с проблемами понимания, стереотипами и страхами команд заказчиков перед большим количеством сервисов. Руслан Сафин (Byndyusoft) расскажет, как это преодолеть в борьбе за чистую архитектуру, качество кода и непрерывный процесс поставки
👉 https://bit.ly/3ilnJtY

По итогам вы получите ранжированные чек-листы практик и ссылки на готовые opensource-решения, помогающие наращивать микросервисы без снижения качества и скорости поставки.

✅ Saint HighLoad++ 2021 состоится 20-21 сентября в Петербурге и онлайн по всему миру. Билеты и тезисы докладов на сайте 👉 https://bit.ly/3hRyiEY

🤓 5 лет назад вышла книга про SRE от Google. В Додо загорелись этой идеей и реализовали.
Павел Притчин (СТО Dodo Engineering) в своем докладе расскажет:
🔹Как продвигалась методология в компании, как меняли майндсет людей и проводили онбординг в SRE разработчиков.
🔹Как боролись с рутиной, чтобы делать больше малым составом и успевать делать системные изменения.
🔹Как внедрялись практики инцидент-менеджмента, постмортемов, дежурства, мониторинг.
🔹Как распространяли практики SRE на разработчиков.
Все подробности 👉 https://bit.ly/3ji14he

✅ Saint HighLoad++ 2021 состоится 20-21 сентября в Петербурге и онлайн по всему миру. Билеты и тезисы докладов на сайте 👉 https://bit.ly/3hRyiEY

Использование облачных систем стало стандартом для большинства highload-проектов. На конференции в Санкт-Петербурге мы рассмотрим тему облаков с двух сторон.

☁️ Первая — построение приватного облака.

В программе инструкция от Алексея Учакина из ECOMMPAY IT по построению собственного облака 👉🏻 https://bit.ly/3fRDZ4a

Если вам нужно приватное облако, то вот вам VMWare, Nutanix или решение «под ключ» от сервис-провайдера.
Но что делать, если своё (совсем своё) облако хочется, а команды разработчиков под рукой нет? Покупать «коробку» и настраивать под себя? Собирать конструктор из кубиков opensource-решений?

Вместе с Алексеем обсудим:
🔹OpenStack vs VMWare: что выбрать?
🔹Хранилище: CEPH или не CEPH?
🔹Гиперконвергентность или отдельные роли?
🔹Сеть, как основа всего — сколько слоёв абстракции необходимо и достаточно?
🔹Сколько нужно человек, чтобы запустить облако?

✅ Saint HighLoad++ 2021 состоится 20-21 сентября в Петербурге и онлайн по всему миру. Билеты и тезисы докладов на сайте 👉 https://bit.ly/3yEmJqB

Всем привет!
Не забыли? Встречаемся в Петербурге 20-21 сентября на долгожданном Saint HighLoad Conf 2021. Расписание уже на сайте 👉 https://bit.ly/3iELVYh
Можно планировать своё участие в конференции. И, если вы ещё не купили билет, то самое время это сделать.

Онтико участвует в масштабном исследовании IT-отрасли России.

Авторы проекта — портал Хабр вместе с партнёрами — собирают мнения айтишников, чтобы разобраться, какими критериями они руководствуются при выборе работодателя, замерить, как специалистами воспринимаются разные компании. По итогу будет составлен открытый рейтинг IT-работодателей (опубликуют на Хабре), основанный на том, как к ним относятся в сообществе.

Нам ценно мнение каждого из вас, вне зависимости от должности и опыта работы.

Подключайтесь к опросу, это займёт 10-15 минут https://bit.ly/3xJxDKe
Результаты мы ждем осенью, а пока можно посмотреть рейтинг и аналитику по IT-работодателям России 2020 https://bit.ly/3AysE0X

Eсли бизнес компании заключается в приеме и обработке платежей во множестве стран в режиме 365/24/7, нужно соответствовать особенным условиям.

На конференции HighLoad++ Весна 2021 директор департамента эксплуатации и разработки сервисных систем ECOMMPAY IT Фёдор Васильев рассказал об эволюции подходов его компании к деплою нового кода. Прочитать об этом можно в нашей новой статье.

⚡️На Saint HighLoad ++ Иван Зерин (Scentbird) расскажет про бизнес-модель данных и как она влияет на процесс подготовки данных в загрузке в datalake https://bit.ly/37LSe61.
🔹Отличия концепции ETL и ELT;
🔹базовые концепции инструмента для преобразования данных DBT;
🔹как они используют DBT для построения сложных моделей, а также осуществляют тестирование данных;
🔹как масштабируется такое решение.

✅Встречаемся на Saint HighLoad++в Петербурге, 20-21 сентября. Полная программа, расписание и билеты 👉🏻 https://bit.ly/3xKP0u6

Тему ETL на Saint HighLoad ++ продолжит Владимир Верстов из Яндекса в докладе “ETL-сервисы для Такси, Еды и Лавки. Как мы разрабатываем платформу управления данными” 👉🏻https://bit.ly/3xLDsqu
🔹Какие данные хранятся в Data Lake и в каком формате, какие слои и потоки данных есть в DWH: как мы несем данные от десятков различных источников до дашбордов в Tableau и OLAP кубов в MS SSAS;
🔹Почему мы решили вместо готового ETL инструмента написать свой;
Как устроена наша монорепа из ETL сервисов и процесс разработки, отладки и деплоя;
🔹Запуск ETL процессов в 2-х дата центрах, организация тяжелых потоков данных между большими хранилищами, мониторинг наших процессов, проверки качества данных и многое другое;
🔹Про взаимодействие между дата инженерами и бекенд-разработчиками и аналитиками данных на уровне кода.

✅Встречаемся на Saint HighLoad++в Петербурге, 20-21 сентября. Полная программа, расписание и билеты https://bit.ly/3xKP0u6

Роман Кондаков из GirdGain на Saint HighLoad++ раскроет тему, как ускоряют движки OLAP баз данных. На какие ухищрения идут разработчики, чтобы ускорить ваши запросы https://bit.ly/3xGNZTR

Мы поговорим об индексах, оптимизации запросов, параллелизме, векторизации, разных железяках и о многом другом, что разработчики пускают в ход, лишь бы запросы не тормозили (а бизнес получал информацию вовремя).

✅Встречаемся на Saint HighLoad++ 20-21 сентября в Петербурге. Полная программа, расписание и билеты https://bit.ly/3fWnqUM

💥 Завершит блок data driven на Saint HighLoad++ Максим Лапшин с рассказом о том, как они внедрили систему телеметрии, которая позволяет находить тех клиентов, кто молчит, но так же страдает, как те, что обратились, а также находить тех, кому плохо ещё до того, как они обратятся.

Реальный пример использования data driven, позволяющий принимать решения на основе цифр, оценивать реальный урон от выявленных проблем и получить реальную картинку происходящего не только со слов клиента 👉🏻https://bit.ly/3iHA3EY

✅ Встречаемся на Saint HighLoad++ 2021 в Петербурге 20-21 сентября. Программа и билеты на сайте 👉https://bit.ly/3s8i1yK

🚀 Сколько логов генерирует ваш проект? Данных стало слишком много! Каждый пользователь генерирует огромное количество логов, клики, переходы, покупки, транзакции. Но как обрабатывать такой объем информации? Как их хранить? Как извлекать из логов знания для бизнеса?

Александр Крылов из Росгосстраха расскажет именно об этом - как с помощью правильной готовки логов в транзакционном виде на базе конвенции логирования сделать хорошо и себе, и бизнесу https://bit.ly/2UcBwts

Успейте запланировать своё участие в Saint HighLoad++. И, если вы ещё не купили билет, то самое время это сделать. Расписание уже на сайте 👉https://bit.ly/37JtU4I

🔥 Пётр Зайцев из Одноклассников раскроет тему использования Elasticsearch для логов в особо крупных масштабах:
🔹холодное хранилище на elasticsearch для архивных данных;
🔹особенности использования hdd и ssd в рамках elasticsearch;
🔹отказоустойчивость elasticsarch размером ~1к нод, или что нам принёс elasticsearch 7;
🔹практический профит: как облегчает жизнь разным командам разработки и не только.
Для полного погружения в тему советуем ознакомится с доп. информацией к докладу https://bit.ly/2XqPtFy

✅ Встречаемся на Saint HighLoad++ 2021 в Петербурге 20-21 сентября. Программа и билеты на сайте 👉https://bit.ly/3slmwpR

Пользователи — это наши друзья, даже если они об этом еще не знают.
От их доверия зависит ваша ежедневная работа, авральные ситуации и даже восстановление после аварии. Чтобы они нам доверяли, наши действия должны быть максимально прозрачными, а коммуникации с ними — постоянными и полезными для них.

Виктор Попов рассказал, как выстроить коммуникации, чтобы пользователи были на вашей стороне и не отвлекали вас от «пожарного» спасения прода. Сегодня вышла вторая часть по мотивам доклада Виктора 👉🏻 https://bit.ly/3g0GzVF. В ней можно узнать о том, как вести коммуникацию с пользователями, зачем это нужно и о чем говорить, когда вроде бы не о чем.

Денис Безкоровайный подвергнет сомнению святое - его доклад называется “Есть ли жизнь без ELK? Как снизить стоимость Log Management, используя Kafka, ClickHouse и Vector”.

🤓 Можно ли в разы снизить затраты на хранение и обработку логов?

В докладе Дениса - опыт построения централизованной системы для управления логами. Процесс выбора решений, почему остановились на связке Vector/Kafka/ClickHouse, какие есть сложности в работе с логами в ClickHouse и как их решать, а также — как эффективно писать, анализировать и хранить сотни гигабайт логов в сутки. Подробности https://bit.ly/3g2UHxw

📌Полная программа, расписание и билеты на Saint HighLoad++ https://bit.ly/3yLGFrp

Нарушение доступности системы — одно из трех направлений тестирования безопасности, о котором часто забывают. При этом отказ сервиса может принести компании убытки, несравнимо большие, чем утечка данных.

В докладе Алексея Бабенко (Мир Plat.Form) мы глазами нарушителя посмотрим на информационные системы, разберем типовые ошибки, приводящие к атакам отказа в обслуживании, и примеры из жизни, когда падали, казалось бы, самые производительные системы https://clck.ru/Wx7Pi

✅Встречаемся на Saint HighLoad++ 20-21 сентября в Петербурге. Полная программа, расписание и билеты https://clck.ru/Wx7RN