Как сменить 4 системы мониторинга за 4 года и остаться в живых? Узнаем из доклада Александра Качмашева.
⠀
Александр покажет 5 факапов, которые стали причиной изменений (однажды они посреди ночи разбудили десятки человек из-за сбоя системы мониторинга). Объяснит, почему им иногда проще поменять всю систему мониторинга, чем что-то менять в текущей.
⠀
Александр расскажет, насколько замена системы мониторинга влияет на разработчиков, и что им приходится испытывать во время изменений. И как во время турбулентности системы мониторинга оставить веру в его адекватность и корректность.
⠀
Какие выводы они делают, и что делать, если хочется хранить метрики долго, а платить бесконечное количество денег не получается.
⠀
🖐 Ждем вас на крупнейшей профессиональной конференции для разработчиков высоконагруженных систем HighLoad++ 2023, которая пройдет 27 и 28 ноября в Москве.
⠀
✅ На сайте в описании канала @HighLoadChannel можно ознакомиться с программой конференции и купить билет

Александр Ванюшкин расскажет, как создать отказоустойчивый и масштабируемый конвейер обработки больших файлов с помощью Cadence.
⠀
Обработка больших файлов обладает рядом особенных (из-за возможных сбоев) ограничений ресурсов и необходимостью эффективного масштабирования. Александр поделится опытом, полученным при создании конвейера обработки с использованием Cadence.
⠀
Cadence — это распределенный, масштабируемый, надежный и высокодоступный механизм оркестрации, который разработан для создания и управления сложными, длительными и асинхронными бизнес-процессами. Поговорим о средствах мониторинга, архитектуре и о том, как Cadence используется в их инфраструктуре.
⠀
Встречаемся на HighLoad++ 2023, в рамках которой пройдет Golang Conf 2023 🙌
⠀
✅ Ознакомиться с программой конференции и купить билет можно на сайте в описании канала @HighLoadChannel

"Mattermost" на стероидах: Евгений Кульгин и Юрий Власов расскажут, как они запустили и развивают корпоративный мессенджер.
⠀
Узнаем, с какими трудностями они столкнулись при использовании корпоративного мессенджера Mattermost. Доклад будет полезен тем, кто только собирается развернуть собственный корпоративный мессенджер, чтобы понять, на что обратить внимание и какие узкие места можно обнаружить. Пройдем путь развития сервиса от 20 человек до 10 тысяч: что делали, чтобы улучшить его работоспособность и облегчить жизнь при поддержке/администрировании.
⠀
1) Как все начиналось: почему появилась необходимость в корпоративном мессенджере. Первая версия сервера 3в1 (БД, сервер Mattermost + сервер авторизации все вместе). Добавление инструментов. Привлечение IT-команд.
⠀
2) Реакция пользователей: плюсы и минусы. Добавление функционала на основе Обратной Связи (плагины). Увеличение функционала – самописные плагины. Как они придумали использовать скрытые сообщения (что дало: экономия, безопасность, сокращение времени решения задачи.)
⠀
3) А им 1 год! Увеличение пользователей и устранение узких мест. Настройка отказоустойчивости (уменьшают время простоя; делают общий конфиг без синхронизации). Наработка автоматизаций (скрипт автообновления, скрипт автопроверки версий, автоочистка файлового хранилища, автоочистка каналов). Вторая версия сервера + s3 хранилище. Создают свой сервер видеозвонков на базе LiveKit.
⠀
4) Что будет дальше? Выводы, что имеют сейчас. Графики доступности сервиса (было/стало), графики нагрузок на систему (было/стало). Новый функционал, который планируют внедрить: интеграция с внутренней HR-системой, интеграция с Outlook.
⠀
Встречаемся на HighLoad++ 2023 🙌
⠀
✅ Программа конференции и билеты на сайте в описании канала @HighLoadChannel

Эдуард Александров расскажет историю одного инцидента: как парализовать работу 20к сотрудников и организовать чемпионат по игре в тетрис.
⠀
Пост-мортем инцидента во внутренней инсталляции Yandex Tracker. Эдуард расскажет, как устроен инцидент-менеджмент, как они обнаруживают инциденты и реагируют на них, что делают, чтобы инциденты не повторялись. Покажет, почему стабильность сервиса - это процесс, а не результат.
⠀
Ждем вас на крупнейшей профессиональной конференции для разработчиков высоконагруженных систем HighLoad++ 2023 🙌
⠀
✅ Ознакомиться с программой конференции и купить билет можно на сайте в описании канала @HighLoadChannel

Владимир Радонец расскажет о том, как Nomad может выстрелить в ногу и что сделать, чтобы увернуться.
⠀
Что общего у водителя, пересевшего с автоматики на механику и SRE-инженера, познавшего переход с K8s на Nomad?
⠀
Nomad выбирают за его флексабилити и админ-френдли подход, но что, если вы продвинулись чуть дальше «стартовой локации». В гайде не описаны тонкости реализации кастомных решений: например, про обновление Nomad с Raft 2 на 3, когда кластер построен на основе Consul.
⠀
Владимир расскажет, как они пытались использовать функционал K8s на примере sidecar, внедряли многопоточные тесты, как подружили GitLab и Nomad. Поделится горьким опытом, советами по кастомизации Nomad и способами безопасной передачи секретов типа .env с помощью Vault в продуктовом окружении.
⠀
Собираемся 27 и 28 ноября в Москве на HighLoad++ 2023 🙌
⠀
✅ Программа конференции и билеты на сайте в описании канала @HighLoadChannel

Игорь Балюк расскажет, как они делают трейсинг в условиях тысяч сервисов и миллионов спанов в секунду.
⠀
Поговорим о трейсинге в Авито: какую он задачу решает и как у них выглядит архитектура трейсинга, обрабатывающая миллионы спанов в секунду от нескольких тысяч сервисов, объединенных в service mesh (который, как оказалось, помогает). Игорь расскажет, как они меняли подходы к семплированию данных и почему ушли от Jaeger к OpenTelemetry и собственному инструменту, объединяющему трейсинг, логи и метрики.
⠀
Рассмотрим примеры из их опыта, когда трейсинг ускоряет нахождение проблем и отладку в распределенной среде, и попробуем ответить на вопрос «зачем нужен трейсинг и какая цена у его внедрения»?
⠀
Встречаемся 27 и 28 ноября в Москве на HighLoad++ 2023 🙌
⠀
✅ Программа конференции и билеты на сайте в описании канала @HighLoadChannel

YDB Topic Service: Александр Зевайкин расскажет, как они повышали производительность очереди сообщений.
⠀
В составе платформы YDB работает сервис очередей сообщений — Topic Service. Он обладает надёжностью, масштабируемостью, гарантиями порядка и доставки.
⠀
В этом докладе Александр расскажет про ускорение YDB Topic Service и приведет сравнение с конкурентами.
⠀
Ждем вас 27 и 28 ноября на крупнейшей профессиональной конференции для разработчиков высоконагруженных систем HighLoad++ 2023 🙌
⠀
✅ Программа конференции и билеты на сайте в описании канала @HighLoadChannel

BrainSploit. Об эксплойтах социальной инженерии поговорим с Антоном Бочкаревым.
⠀
Легендарный Кевин Митник рассказывал о своем практическом опыте социальной инженерии. Мы же, проводя проекты по социотехническому тестированию на проникновение, в какой-то степени лишь повторяем его сценарии или сценарии коллег. Но почему? Потому что мы отталкиваемся только от чьего-либо опыта, а не от базы.
⠀
Представьте, насколько был бы эффективен пентест в иной области, если бы все, практически бездумно, повторяли проверки коллег, не понимая, как оно работает изнутри?
⠀
В этом докладе мы поговорим с вами о базе. О тех психологических механизмах, которые лежат в основе психологии влияния. Эти основы, подтвержденные многочисленными исследованиями и экспериментами социальных психологов 20 и 21 века, крайне эффективно используются в различных областях, от фишинга, маркетинга и продаж, до любовных аферистов и мошенников колл-центров «службы безопасности». Эти уязвимые механизмы - наше эволюционное наследие, legacy-код нашего мозга.
⠀
Мы разберём примеры скриптов, полученных из мошеннического колл-центра в Бердянске, а также примеры из собственной практики Антона. Эта база позволит вам писать собственные успешные сценарии, и эффективнее противостоять вредоносным манипуляциям.
⠀
Встречаемся на HighLoad++ 2023 в Москве 🙌
⠀
✅ Программа конференции и билеты на сайте в описании канала @HighLoadChannel

Из доклада Григория Бутейко узнаем про BARSiC — асинхронной репликации и консенсусе для 70 баз данных.
⠀
Ядром ВКонтакте являются 70 специализированных баз данных (движков), организованных в 800 кластеров, имеющих в сумме 10000+ шардов.
⠀
Чтобы безболезненно переживать отказы мастера шарда, они сделали BARSiC (Binlog Asynchronous Replication using Simple BD interface + Consensus) — в простонародье Барсик. Это система, которая обеспечивает автоматическое переключение ролей реплик и консистентность данных между ними, при этом не усложняет и не замедляет сами движки.
⠀
Григорий расскажет, как они проектировали BARSiC, почему отказались от стороннего консенсуса и каким образом с помощью модели TLA+ проверяют корректность кода Барсика на Go.
⠀
Встречаемся на HighLoad++ 2023 🙌
⠀
✅ Программа конференции и билеты на сайте в описании канала @HighLoadChannel

В докладе Эдгара Сипки мы разберем Protobuf и buf: блеск, нищета и импортозамещение.
⠀
В мире быстрых технологий и постоянно меняющихся требований, инструменты, которые обеспечивают эффективность и совместимость, становятся ключевыми. Однако, что делать, когда доступ к таким инструментам ограничен из-за политической обстановки?
⠀
В этом докладе мы погрузимся в мир Protobuf и инструмента buf, мощной утилиты для линтинга прото файлов, проверки обратной совместимости API, генерации кода и валидации запросов. Эдгар расскажет о разнообразии фич и удобств, которые предлагает buf.
⠀
Однако, как и в любой бочке меда есть ложка дегтя - его недоступность в России из-за санкций. Эта проблема подтолкнула Эдгара и команду к разработке собственного решения, замещающего сервер buf.
⠀
Эдгар поделится историей реверс-инжиниринга сервера buf и процессом создания собственного сервера, который хотя бы частично, но смог заменить функционал их пакетного менеджера.
⠀
Встречаемся на HighLoad++ 2023, в рамках которой пройдет Golang Conf 2023 🙌
⠀
✅ Узнать подробнее программу конференции можно на сайте в описании канала @HighLoadChannel