Про высокодоступный MySQL на конвейере расскажет Дмитрий Смаль, руководитель группы разработки Managed MySQL в Yandex Cloud
⠀
📋 https://bx.vc/3htbuo
⠀
Обсудим:
⠀
Проблемы эксплуатации MySQL в облаках.
⠀
- Что нужно автоматизировать в управляемой базе данных?
- Обзор существующих решений и их фатальные недостатки.
- Архитектура и возможности новой HA-утилиты mysync.
- Плюсы и минусы синхронной репликации.
- Как пользователи пытаются выстрелить себе (и нам) в ногу и что с этим делать?
- Направления развития проекта.
⠀
🖐 Встречаемся 24 и 25 ноября на HighLoad++ 2022
⠀
✅ Программа Яндекс трека - https://bx.vc/nv4bud
⠀
📋 https://bx.vc/3htbuo
⠀
Обсудим:
⠀
Проблемы эксплуатации MySQL в облаках.
⠀
- Что нужно автоматизировать в управляемой базе данных?
- Обзор существующих решений и их фатальные недостатки.
- Архитектура и возможности новой HA-утилиты mysync.
- Плюсы и минусы синхронной репликации.
- Как пользователи пытаются выстрелить себе (и нам) в ногу и что с этим делать?
- Направления развития проекта.
⠀
🖐 Встречаемся 24 и 25 ноября на HighLoad++ 2022
⠀
✅ Программа Яндекс трека - https://bx.vc/nv4bud
🔥1
Юрий Власов и Тимофей Нецветаев расскажут доклад на тему Кролик по-СДЭКовски: RabbitMQ как основной центр обмена данными в модульной среде с очередями больше 2000
⠀
📋 https://bx.vc/fx94y3
⠀
В СДЭК вместе с Кроликом они прошли тернистый путь от 1 ноды до крупного кластера. Юрий с Тимофеем поделится своим опытом использования инструмента и расскажут:
- как они живут с хайлоад кластером из 8 нод
- почему они отказались от HA-cluster;
- почему они не используют Kafka?
- какие опасности вас могут ждать, если вы хотите делать распределенный кластер между ЦОДами
- отказоустойчивость или скорость — а можно все вместе?
- почему в Exchange они отказываются от Topic и уходят на Fanout?
- история их факапов и как PHP сжег кролика
- что нового появилось в RabbitMQ за последний год
⠀
Присоединяйтесь к нам 24 и 25 ноября на HighLoad++ в Москве 🙌
⠀
✅ Программа Яндекс трека - https://bx.vc/62e7un
⠀
📋 https://bx.vc/fx94y3
⠀
В СДЭК вместе с Кроликом они прошли тернистый путь от 1 ноды до крупного кластера. Юрий с Тимофеем поделится своим опытом использования инструмента и расскажут:
- как они живут с хайлоад кластером из 8 нод
- почему они отказались от HA-cluster;
- почему они не используют Kafka?
- какие опасности вас могут ждать, если вы хотите делать распределенный кластер между ЦОДами
- отказоустойчивость или скорость — а можно все вместе?
- почему в Exchange они отказываются от Topic и уходят на Fanout?
- история их факапов и как PHP сжег кролика
- что нового появилось в RabbitMQ за последний год
⠀
Присоединяйтесь к нам 24 и 25 ноября на HighLoad++ в Москве 🙌
⠀
✅ Программа Яндекс трека - https://bx.vc/62e7un
Из доклада Дарвиша Баселя вы узнаете, чем полезен Root cause analysis monitoring
📋 https://bx.vc/4ovzv8
Компания 1С давно занимается облачными технологиями. Облачные сервисы 1С:Готовое Рабочее Место и 1cFresh используют десятки тысяч людей ежедневно.
Басель подробно расскажет, как 1С использует графы в задачах мониторинга и observability, и как Root Cause Analysis помогает командам эксплуатации в мониторинге.
😎 Приходите послушать доклад Root cause analysis monitoring 24 ноября в Москве или подключайтесь онлайн
🙋Хотите пообщаться лично – заглядывайте на стенд 1С в центре зала
📋 https://bx.vc/4ovzv8
Компания 1С давно занимается облачными технологиями. Облачные сервисы 1С:Готовое Рабочее Место и 1cFresh используют десятки тысяч людей ежедневно.
Басель подробно расскажет, как 1С использует графы в задачах мониторинга и observability, и как Root Cause Analysis помогает командам эксплуатации в мониторинге.
😎 Приходите послушать доклад Root cause analysis monitoring 24 ноября в Москве или подключайтесь онлайн
🙋Хотите пообщаться лично – заглядывайте на стенд 1С в центре зала
🔥3
Просто о сложном: как работает драйвер распределенной базы данных YDB узнаем из доклада Алексея Мясникова
⠀
📋 https://bx.vc/6drrpq
⠀
Драйвер распределенной базы данных существенно отличается от драйверов традиционных (нераспределенных) баз данных. Главная отличительная особенность распределенных баз данных - необходимость работать со множеством нод СУБД. Для равномерной нагрузки на ноды БД в YDB используется как клиентская, так и серверная балансировка.
⠀
Для баз данных, работающих в режиме 24/7 и допускающих различные сценарии отказа, драйвер должен быть готов к ошибкам разного рода. Это влияет на то, каков должен быть драйвер распределенной базы данных.
⠀
Алексей расскажет про их опыт разработки драйверов для распределенной БД на разных языках, про проблемы, с которыми сталкивались и решали или митигировали, а также про вынесенные уроки и принятые решения.
⠀
Ждем вас 24 и 25 ноября на HighLoad++ 2022 🙌
⠀
✅ Программа Яндекс трека - https://bx.vc/jr3xzk
⠀
📋 https://bx.vc/6drrpq
⠀
Драйвер распределенной базы данных существенно отличается от драйверов традиционных (нераспределенных) баз данных. Главная отличительная особенность распределенных баз данных - необходимость работать со множеством нод СУБД. Для равномерной нагрузки на ноды БД в YDB используется как клиентская, так и серверная балансировка.
⠀
Для баз данных, работающих в режиме 24/7 и допускающих различные сценарии отказа, драйвер должен быть готов к ошибкам разного рода. Это влияет на то, каков должен быть драйвер распределенной базы данных.
⠀
Алексей расскажет про их опыт разработки драйверов для распределенной БД на разных языках, про проблемы, с которыми сталкивались и решали или митигировали, а также про вынесенные уроки и принятые решения.
⠀
Ждем вас 24 и 25 ноября на HighLoad++ 2022 🙌
⠀
✅ Программа Яндекс трека - https://bx.vc/jr3xzk
😏 Хотите узнать, как сделать Lowcode-платформу? А хотите узнать это от человека, который сделал самую известную Lowcode-платформу России и СНГ? ++ может правильнее – самую популярную? Или даже – самую успешную?
Тогда приходите на доклад Сергея Нуралиева Highload и Lowcode — единство и борьба противоположностей https://bx.vc/krgdxo
На примере успешной low-code-платформы 1С:Предприятие (https://v8.1c.ru/platforma/) Сергей расскажет о том:
⭕️как выстраивать стратегию low-code;
⭕️как использовать преимущества low-code-подхода при движении к highload;
⭕️как не растерять преимущества low-code по пути к highload.
👌Приходите на доклад 24 ноября и ловите возможность пообщаться с Сергеем лично на стенде 1С в центре зала
Тогда приходите на доклад Сергея Нуралиева Highload и Lowcode — единство и борьба противоположностей https://bx.vc/krgdxo
На примере успешной low-code-платформы 1С:Предприятие (https://v8.1c.ru/platforma/) Сергей расскажет о том:
⭕️как выстраивать стратегию low-code;
⭕️как использовать преимущества low-code-подхода при движении к highload;
⭕️как не растерять преимущества low-code по пути к highload.
👌Приходите на доклад 24 ноября и ловите возможность пообщаться с Сергеем лично на стенде 1С в центре зала
🔥3👍1
Индустрия разработки растет и уже составляет сотни миллиардов долларов, а проблемы безопасности решаются медленно. Поэтому и попали в топ-10 экспертного рейтинга глобальных рисков Международного экономического форума в Давосе. DevSecOps сейчас особенно актуально.
⠀
Директор по развитию бизнеса компании Swordfish Security Андрей Иванов разберет, какая часть DevSecOps главная. DevOps (разработка и эксплуатация, встроенные в бизнес-процессы организации) или Sec (все, что связано с безопасностью)? И расскажет как понять, что в вашей организации пришло время для DevSecOps и как к нему подготовиться.
⠀
Конечно, будут основные принципы и концептуальная схема DevSecOps.
⠀
https://bx.vc/81jnht
⠀
Директор по развитию бизнеса компании Swordfish Security Андрей Иванов разберет, какая часть DevSecOps главная. DevOps (разработка и эксплуатация, встроенные в бизнес-процессы организации) или Sec (все, что связано с безопасностью)? И расскажет как понять, что в вашей организации пришло время для DevSecOps и как к нему подготовиться.
⠀
Конечно, будут основные принципы и концептуальная схема DevSecOps.
⠀
https://bx.vc/81jnht
Хабр
Бесшовное внедрение практик безопасности в DEVOPS-конвейер
На последнем Международном экономическом форуме в Давосе эксперты представили рейтинг глобальных рисков, которые будут актуальны в ближайшие годы — в топ-10 попали киберугрозы. Это связано с тем, что...
👍2
🚀 Доброе утро, друзья! Мы рады объявить о старте профессиональной конференции для разработчиков высоконагруженных систем HighLoad++ 2022, которая пройдет сегодня и завтра в Москве!
⠀
Как это будет?
⠀
🔹 Продолжительность мероприятия - два полных дня. Первый доклад начинается ежедневно в 10:00, а последний заканчивается в 18:50. Регистрация открывается в 8:30.
⠀
🔹Длительность докладов 40-50 минут + перерыв на 20 минут для проветривания залов.
⠀
👉 Расписание на два дня здесь: https://bx.vc/cc52o9
⠀
😉 Ждём вас! Открытие конференции уже в 9:30
⠀
Как это будет?
⠀
🔹 Продолжительность мероприятия - два полных дня. Первый доклад начинается ежедневно в 10:00, а последний заканчивается в 18:50. Регистрация открывается в 8:30.
⠀
🔹Длительность докладов 40-50 минут + перерыв на 20 минут для проветривания залов.
⠀
👉 Расписание на два дня здесь: https://bx.vc/cc52o9
⠀
😉 Ждём вас! Открытие конференции уже в 9:30
✋Дорогие участники HighLoad++ 2022, напоминаем, что помимо докладов в программе конференции есть:
⠀
▪️TechTalk перед докладами – https://bx.vc/kvmbti
▪️Экспертные зоны – https://bx.vc/vu5gbp
▪️Интерактивная площадка для CTO – https://bx.vc/cbfljv
⠀
И, конечно, огромная выставка с активностями от наших партнеров (будем держать вас в курсе)
⠀
Приходите, участвуйте, заряжайтесь вдохновением и отличным настроением 🙌
⠀
▪️TechTalk перед докладами – https://bx.vc/kvmbti
▪️Экспертные зоны – https://bx.vc/vu5gbp
▪️Интерактивная площадка для CTO – https://bx.vc/cbfljv
⠀
И, конечно, огромная выставка с активностями от наших партнеров (будем держать вас в курсе)
⠀
Приходите, участвуйте, заряжайтесь вдохновением и отличным настроением 🙌
✋ Чтобы не пропустить доклады, которые вы очень хотите посетить, запускайте нашего бота-помощника – https://t.iss.one/hlconf_bot
Он поможет смотреть расписание и вовремя напомнит про выбранные доклады 🙌
Он поможет смотреть расписание и вовремя напомнит про выбранные доклады 🙌
В этом сезоне тема Яндекс трека — базы данных. Ловите расписание докладов трека на первую половину дня:
⠀
Зал «h3: Яндекс трек».
⠀
▪️10:00. Константин Аристов (Скала^р). Наша Машина Баз Данных (это как Oracle Exadata, только для PostgreSQL) и система управления к ней
⠀
▪️11:10. Александр Горякин (Tarantool, VK). Репликация между SQL- и NoSQL-базами данных: туда и обратно
⠀
▪️12:20. Виталий Филиппов (Yandex Cloud). GeeseFS: ФС из S3, или Параллелизм гусей в природе
⠀
▪️13:30. Владимир Перепелица (Tarantool, VK). Архитектура надёжной In-Memory-СУБД на примере Tarantool
⠀
Зал «h3: Яндекс трек».
⠀
▪️10:00. Константин Аристов (Скала^р). Наша Машина Баз Данных (это как Oracle Exadata, только для PostgreSQL) и система управления к ней
⠀
▪️11:10. Александр Горякин (Tarantool, VK). Репликация между SQL- и NoSQL-базами данных: туда и обратно
⠀
▪️12:20. Виталий Филиппов (Yandex Cloud). GeeseFS: ФС из S3, или Параллелизм гусей в природе
⠀
▪️13:30. Владимир Перепелица (Tarantool, VK). Архитектура надёжной In-Memory-СУБД на примере Tarantool
❤1🔥1
В 10:00 стартуют первые доклады HighLoad++ 2022:
⠀
🔸h1 Главный зал. Александр Тоболь (ВКонтакте, VK). Техстратегия и архитектура highload-проекта на примере ВКонтакте
⠀
🔸Зал h2. Антон Дорфман (Positive Technologies). Как разобрать сетевой протокол и найти уязвимости в устройстве без использования прошивки — показываем на примере ПЛК Mitsubishi
⠀
🔸Зал h3: Яндекс трек. Константин Аристов (Скала^р). Наша Машина Баз Данных (это как Oracle Exadata, только для PostgreSQL) и система управления к ней
⠀
🔸Зал h4. Сергей Бронников (Tarantool, VK). О чём я говорю, когда говорю о тестировании корректности работы компилятора
⠀
🔸Зал h5. Алексей Шарапов (AK Bars Digital). Объединение DevOps, SRE, Dev, QA в единый DevOps-процесс в банке
⠀
🔸Зал h6. Сергей Нечаев (Yandex Cloud). С чего начинается биллинг облачных сервисов
⠀
🔸Зал p7 PHP Russia. Антон Золотилин (SuperJob). Секреты тестирования версий Web API с помощью Behat
⠀
🔸Зал p8 PHP Russia. Александр Пряхин (Авито). Долгоиграющие приложения в PHP
⠀
🔸h1 Главный зал. Александр Тоболь (ВКонтакте, VK). Техстратегия и архитектура highload-проекта на примере ВКонтакте
⠀
🔸Зал h2. Антон Дорфман (Positive Technologies). Как разобрать сетевой протокол и найти уязвимости в устройстве без использования прошивки — показываем на примере ПЛК Mitsubishi
⠀
🔸Зал h3: Яндекс трек. Константин Аристов (Скала^р). Наша Машина Баз Данных (это как Oracle Exadata, только для PostgreSQL) и система управления к ней
⠀
🔸Зал h4. Сергей Бронников (Tarantool, VK). О чём я говорю, когда говорю о тестировании корректности работы компилятора
⠀
🔸Зал h5. Алексей Шарапов (AK Bars Digital). Объединение DevOps, SRE, Dev, QA в единый DevOps-процесс в банке
⠀
🔸Зал h6. Сергей Нечаев (Yandex Cloud). С чего начинается биллинг облачных сервисов
⠀
🔸Зал p7 PHP Russia. Антон Золотилин (SuperJob). Секреты тестирования версий Web API с помощью Behat
⠀
🔸Зал p8 PHP Russia. Александр Пряхин (Авито). Долгоиграющие приложения в PHP
🔥1
⚡При поддержке генерального партнера - компании 1С - на HighLoad++ 2022 пройдет открытая трансляция главного зала 24 и 25 ноября
➡️ Подключайтесь и смотрите лучшие выступления - https://youtu.be/aYKXGHdruIE
➡️ Подключайтесь и смотрите лучшие выступления - https://youtu.be/aYKXGHdruIE
Следующие доклады ждут вас в 11:10:
⠀
🔸h1 Главный зал. Сергей Нуралиев (1С). Highload и Lowcode — единство и борьба противоположностей
⠀
🔸Зал h2. Никита Назаров (Лаборатория Касперского). Омерзительная восьмёрка: техники, тактики и процедуры (TTPs) группировок шифровальщиков
⠀
🔸Зал h3: Яндекс трек. Александр Горякин (Tarantool, VK). Репликация между SQL- и NoSQL-базами данных: туда и обратно
⠀
🔸Зал h4. Сергей Останевич (Tarantool, VK). Повышаем живучесть Raft в реальных условиях
⠀
🔸Зал h5. Артем Арюткин (Сбер). СберБанк Онлайн: масштабная трансформация legacy
⠀
🔸Зал h6. Александр Синицын (Сбер). Клиентоцентричный подход к управлению данными
⠀
🔸Зал p7 PHP Russia. Александр Лисаченко. Виртуализируй меня... полностью!
⠀
🔸Зал p8 PHP Russia. Руслан Измайлов (Авито). Тестирование на бэкенде. Рекомендации по написанию, виды тестов, пирамида на бэке
⠀
🔸h1 Главный зал. Сергей Нуралиев (1С). Highload и Lowcode — единство и борьба противоположностей
⠀
🔸Зал h2. Никита Назаров (Лаборатория Касперского). Омерзительная восьмёрка: техники, тактики и процедуры (TTPs) группировок шифровальщиков
⠀
🔸Зал h3: Яндекс трек. Александр Горякин (Tarantool, VK). Репликация между SQL- и NoSQL-базами данных: туда и обратно
⠀
🔸Зал h4. Сергей Останевич (Tarantool, VK). Повышаем живучесть Raft в реальных условиях
⠀
🔸Зал h5. Артем Арюткин (Сбер). СберБанк Онлайн: масштабная трансформация legacy
⠀
🔸Зал h6. Александр Синицын (Сбер). Клиентоцентричный подход к управлению данными
⠀
🔸Зал p7 PHP Russia. Александр Лисаченко. Виртуализируй меня... полностью!
⠀
🔸Зал p8 PHP Russia. Руслан Измайлов (Авито). Тестирование на бэкенде. Рекомендации по написанию, виды тестов, пирамида на бэке
⚡️⚡️Друзья, приходите на интерактивную площадку для технических директоров. Вас ждет:
⠀
▫️Мастер-классы по управлению в условиях неопределенности
⠀
▫️Ответы на вопросы:
конец глобализации. Что делать, что сделано?
как предотвратить крах компании из-за пробелов в кибербезопасности
⠀
✅ Программа, расписание и участники здесь - https://cto.highload.ru/
⠀
▫️Мастер-классы по управлению в условиях неопределенности
⠀
▫️Ответы на вопросы:
конец глобализации. Что делать, что сделано?
как предотвратить крах компании из-за пробелов в кибербезопасности
⠀
✅ Программа, расписание и участники здесь - https://cto.highload.ru/
Друзья, приходите на следующие доклады, которые начинаются в 12:20:
⠀
🔸h1 Главный зал. Илья Щербак (ВКонтакте, VK). Архитектура ВКонтакте: там, где данные
⠀
🔸Зал h2. Артем Бачевский (Независимый эксперт). Лицензии: взлом, защита и снова взлом
⠀
🔸Зал h3: Яндекс трек. Виталий Филиппов (Yandex Cloud). GeeseFS: ФС из S3, или Параллелизм гусей в природе
⠀
🔸Зал h4. Анастасия Пятько (РТЛабс). СМЭВ. Сильно проще, чем кажется. Полезные советы, как стартовать интеграцию через СМЭВ3 и СМЭВ4
⠀
🔸Зал h5. Алексей Топчий (X5 Tech). Как вынести расчет цен для 20 тысяч магазинов из SAP, чтобы сохранить 4 девятки
⠀
🔸Зал h6. Александра Баженова (Мир Plat.form). Как ML помогает предотвращать финансовые мошенничества в СБП
⠀
🔸Зал p7 PHP Russia. Валентин Удальцов (Happy Inc.). ID-баттл: UUID vs автоинкремент
⠀
🔸Зал p8 PHP Russia. Сергей Лебедев (VK). Аспектно-ориентированное программирование в PHP: раскладываем сквозную функциональность по полочкам
⠀
🔸h1 Главный зал. Илья Щербак (ВКонтакте, VK). Архитектура ВКонтакте: там, где данные
⠀
🔸Зал h2. Артем Бачевский (Независимый эксперт). Лицензии: взлом, защита и снова взлом
⠀
🔸Зал h3: Яндекс трек. Виталий Филиппов (Yandex Cloud). GeeseFS: ФС из S3, или Параллелизм гусей в природе
⠀
🔸Зал h4. Анастасия Пятько (РТЛабс). СМЭВ. Сильно проще, чем кажется. Полезные советы, как стартовать интеграцию через СМЭВ3 и СМЭВ4
⠀
🔸Зал h5. Алексей Топчий (X5 Tech). Как вынести расчет цен для 20 тысяч магазинов из SAP, чтобы сохранить 4 девятки
⠀
🔸Зал h6. Александра Баженова (Мир Plat.form). Как ML помогает предотвращать финансовые мошенничества в СБП
⠀
🔸Зал p7 PHP Russia. Валентин Удальцов (Happy Inc.). ID-баттл: UUID vs автоинкремент
⠀
🔸Зал p8 PHP Russia. Сергей Лебедев (VK). Аспектно-ориентированное программирование в PHP: раскладываем сквозную функциональность по полочкам
👍1
Из логов событий Spark можно вытащить много полезной информации. Например, применяя идущие из экспертизы эвристики, можно посмотреть на завершившееся приложения с разных сторон и предсказать различные дельты подбираемого параметра, но как автоматически подбирать параметры для Spark-приложений?
⠀
Технический руководитель команды дата-инженеров в oneFactor Валерия Дымбицкая расскажет как они научились делать это автоматически для Spark-приложений на основе логов. Как у них получить создать рабочую автономную систему тюнинга простыми средствами, сэкономив в итоге 15-16% ресурсов кластера. Вас ждут детали с примерами кода.
⠀
https://bx.vc/ggvyhh
⠀
Технический руководитель команды дата-инженеров в oneFactor Валерия Дымбицкая расскажет как они научились делать это автоматически для Spark-приложений на основе логов. Как у них получить создать рабочую автономную систему тюнинга простыми средствами, сэкономив в итоге 15-16% ресурсов кластера. Вас ждут детали с примерами кода.
⠀
https://bx.vc/ggvyhh
Хабр
Конференции Олега Бунина (Онтико), Москва - Профессиональные конференции для IT-разработчиков / Статьи
901 статья от авторов компании Конференции Олега Бунина (Онтико)
👍2