Друзья, приветствуем!
Война, которая происходит сейчас, в 21 веке, выходит за все рамки приемлемости. Абсолютная недопустимая жесть, этого просто не должно быть.
Я против войны, мы против войны. Происходящее переворачивает картину мира, перечеркивает все, над чем мы работаем, отбрасывает нас на десятки лет назад.
Мы считаем, что в текущей ситуации дикого напряжения проведение ближайших конференций Онтико в марте не представляется возможным.
Любая конференция - это не просто обмен опытом, это встреча индустрии, единомышленников, дружеское и профессиональное общение, налаживание связей и даже отдых. Как мы будем всё это делать, когда мысли каждого сейчас о другом? Это просто невозможно.
Конференции переносятся на новые даты:
• HighLoad++ Foundation пройдёт 13 и 14 мая;
• TeamLead Foundation пройдет 17 и 18 мая;
• TestDriven Conf пройдёт 27 и 28 июня.
Конференции в Санкт-Петербурге пройдут:
• Saint HighLoad++ состоится 22 и 23 сентября;
• Saint TeamLead - 26 и 27 сентября.
Все расходы, связанные с переносами, мы берём на себя.
По всем вопросам пишите на [email protected]
Сил нам всем! И мира!
С уважением,
Олег Бунин и команда Онтико
Война, которая происходит сейчас, в 21 веке, выходит за все рамки приемлемости. Абсолютная недопустимая жесть, этого просто не должно быть.
Я против войны, мы против войны. Происходящее переворачивает картину мира, перечеркивает все, над чем мы работаем, отбрасывает нас на десятки лет назад.
Мы считаем, что в текущей ситуации дикого напряжения проведение ближайших конференций Онтико в марте не представляется возможным.
Любая конференция - это не просто обмен опытом, это встреча индустрии, единомышленников, дружеское и профессиональное общение, налаживание связей и даже отдых. Как мы будем всё это делать, когда мысли каждого сейчас о другом? Это просто невозможно.
Конференции переносятся на новые даты:
• HighLoad++ Foundation пройдёт 13 и 14 мая;
• TeamLead Foundation пройдет 17 и 18 мая;
• TestDriven Conf пройдёт 27 и 28 июня.
Конференции в Санкт-Петербурге пройдут:
• Saint HighLoad++ состоится 22 и 23 сентября;
• Saint TeamLead - 26 и 27 сентября.
Все расходы, связанные с переносами, мы берём на себя.
По всем вопросам пишите на [email protected]
Сил нам всем! И мира!
С уважением,
Олег Бунин и команда Онтико
👍53😢19👎12😁1
HighLoad++ via @vote
Планируете ли вы эмигрировать из России?
anonymous poll
Нет и пока не планирую – 722
👍👍👍👍👍👍👍 57%
Планирую в ближайшее время – 312
👍👍👍 25%
Я уже давно, ещё до 24 февраля – 96
👍 8%
Да я и не жил в России – 74
👍 6%
Я уже, после 24 февраля – 61
👍 5%
👥 1265 people voted so far.
anonymous poll
Нет и пока не планирую – 722
👍👍👍👍👍👍👍 57%
Планирую в ближайшее время – 312
👍👍👍 25%
Я уже давно, ещё до 24 февраля – 96
👍 8%
Да я и не жил в России – 74
👍 6%
Я уже, после 24 февраля – 61
👍 5%
👥 1265 people voted so far.
👍9😱5😁1
Команда «Онтико» готова помочь тем, кто потерял работу из-за санкций и их последствий.
Заполните анкету - https://clck.ru/dsSMb и её увидят более 100 потенциальных работодателей.
Если у вас есть друзья, которым актуальна помощь, перешлите им это сообщение.
Заполните анкету - https://clck.ru/dsSMb и её увидят более 100 потенциальных работодателей.
Если у вас есть друзья, которым актуальна помощь, перешлите им это сообщение.
❤33
Tarantool: ускорение разработки с Rust
Tarantool, как известно, поддерживает любой язык, который совместим с C и компилируется в машинный код. В том числе на Lua и C можно реализовать хранимые функции и модули. Но можно еще круче — и производительность будет выше в 5 раз, чем на Lua и сопоставимо с C.
Олег Уткин в Tarantool занимается высоконагруженными системами хранения данных. В своей статье он рассказал, чем так хорош Rust и как он может заткнуть по производительности за пояс Lua и C. С примерами двух проектов, которые Tarantool уже реализовал на Rust.
Читать 📍 https://habr.com/ru/company/oleg-bunin/blog/650991/
Tarantool, как известно, поддерживает любой язык, который совместим с C и компилируется в машинный код. В том числе на Lua и C можно реализовать хранимые функции и модули. Но можно еще круче — и производительность будет выше в 5 раз, чем на Lua и сопоставимо с C.
Олег Уткин в Tarantool занимается высоконагруженными системами хранения данных. В своей статье он рассказал, чем так хорош Rust и как он может заткнуть по производительности за пояс Lua и C. С примерами двух проектов, которые Tarantool уже реализовал на Rust.
Читать 📍 https://habr.com/ru/company/oleg-bunin/blog/650991/
Хабр
Tarantool: ускорение разработки с Rust
Tarantool, как известно, поддерживает любой язык, который совместим с C и компилируется в машинный код. В том числе есть возможность реализации хранимых функций и модулей на Lua и C. Тем не менее, уже...
Всем привет!
За последний месяц IT-ландшафт сильно изменился и перемены продолжаются. Мы актуализируем программу конференции HighLoad++ Foundation (13 и 14 мая, Москва).
Принятая программа 👉 https://clck.ru/eYRXt с хардкорными техническими докладами остается. К ней добавятся секции, которые можно объединить одной темой «Как действовать дальше?»
Сейчас мы ищем спикеров для этих новых секций. Подавайте заявку, если вам есть, что рассказать - https://clck.ru/eYRYU
За последний месяц IT-ландшафт сильно изменился и перемены продолжаются. Мы актуализируем программу конференции HighLoad++ Foundation (13 и 14 мая, Москва).
Принятая программа 👉 https://clck.ru/eYRXt с хардкорными техническими докладами остается. К ней добавятся секции, которые можно объединить одной темой «Как действовать дальше?»
Сейчас мы ищем спикеров для этих новых секций. Подавайте заявку, если вам есть, что рассказать - https://clck.ru/eYRYU
👍1
Forwarded from Онтико
Программный комитет HighLoad++ открывает Call for Papers для поиска актуальных докладов на темы:
1. Импортозамещение - состоявшиеся кейсы, обзорные доклады, перспективы и цели импортозамещения. Может ли Россия импортозаместить хоть что-то?
2. Офисная инфраструктура, поиск готовых аналогов, обзорные доклады по готовым аналогам, решения для малых и средних компаний, кейсы переезда инфраструктуры.
3. Обратно из облаков - переезды из облаков на серверную инфраструктуру, переезд с западных на российские облака, сравнительные расчёты стоимости серверной и облачной инфраструктуры, вынужденное велосипедостроение (скрипты взамен облачных сервисов).
4. Следующая волна - построение карты рисков дальнейших отключений и схемы митигации, могут ли отключить интернет, разрывы связности, разрушение DNS, разрушение экосистемы opensource. Гарантии, предоставляемые инфраструктурой и сообществами, в каком порядке эти гарантии будут разрушаться? Что по настоящему страшного может произойти?
5. Резкий рост нагрузки - действия в условиях резкого изменения профилей нагрузки, первые действия при резком росте нагрузки.
6. Безопасность - картина атак, DDoS, защита от закладок в opensource-проектах, отзывы SSL-сертификатов, построение собственных центров сертификации. Что делать небольшим командам и проектам?
7. Поддержка команды - как поддержать сейчас своих коллег, как не поддаться панике, фреймворк работы с командой в кризисных условиях.
8. Кремний - риски по железу, процессорам, альтернативные каналы поставок, специализированные устройства, маршрутизаторы;
9. Новая инфраструктурная парадигма - работа в условиях разрушенного доверия, обратные глобализации процессы. Множество людей по всему миру, в должностные обязанности которых входит анализ рисков использования тех или иных компонент, включая SaaS-сервисы, по новому вынуждены будут посмотреть на IT-ландшафт. Круглый стол на тему долгосрочных последствий.
Доклады по темам выше принимаются до 6 апреля. Остальные хардкорные темы остаются в сфере внимания конференции, но программа по ним уже сформирована.
1. Импортозамещение - состоявшиеся кейсы, обзорные доклады, перспективы и цели импортозамещения. Может ли Россия импортозаместить хоть что-то?
2. Офисная инфраструктура, поиск готовых аналогов, обзорные доклады по готовым аналогам, решения для малых и средних компаний, кейсы переезда инфраструктуры.
3. Обратно из облаков - переезды из облаков на серверную инфраструктуру, переезд с западных на российские облака, сравнительные расчёты стоимости серверной и облачной инфраструктуры, вынужденное велосипедостроение (скрипты взамен облачных сервисов).
4. Следующая волна - построение карты рисков дальнейших отключений и схемы митигации, могут ли отключить интернет, разрывы связности, разрушение DNS, разрушение экосистемы opensource. Гарантии, предоставляемые инфраструктурой и сообществами, в каком порядке эти гарантии будут разрушаться? Что по настоящему страшного может произойти?
5. Резкий рост нагрузки - действия в условиях резкого изменения профилей нагрузки, первые действия при резком росте нагрузки.
6. Безопасность - картина атак, DDoS, защита от закладок в opensource-проектах, отзывы SSL-сертификатов, построение собственных центров сертификации. Что делать небольшим командам и проектам?
7. Поддержка команды - как поддержать сейчас своих коллег, как не поддаться панике, фреймворк работы с командой в кризисных условиях.
8. Кремний - риски по железу, процессорам, альтернативные каналы поставок, специализированные устройства, маршрутизаторы;
9. Новая инфраструктурная парадигма - работа в условиях разрушенного доверия, обратные глобализации процессы. Множество людей по всему миру, в должностные обязанности которых входит анализ рисков использования тех или иных компонент, включая SaaS-сервисы, по новому вынуждены будут посмотреть на IT-ландшафт. Круглый стол на тему долгосрочных последствий.
Доклады по темам выше принимаются до 6 апреля. Остальные хардкорные темы остаются в сфере внимания конференции, но программа по ним уже сформирована.
cfp.highload.ru
Call for papers
Подайте доклад на профессиональную конференцию разработчиков высоконагруженных систем HighLoad++
👍4🔥4
Угнать за 5 миллисекунд: как мы наладили быструю доставку данных в сложной биржевой системе с помощью Tarantool
Представьте себе выход на биржу очень крупной компании (как Сбербанк). Листинг их ценных бумаг может аффектиться другими процессами на бирже, поэтому для минимизации рисков и чтобы сделка не сорвалась биржи запускают такие вещи на отдельных торговых ядрах.
Статья Олега Уткина из отдела архитектуры систем хранения данных Tarantool как раз об этом. Читайте, как консолидировать потоки данных из разных торговых систем и наладить их доставку клиентам. Много граблей и несколько интересных выводов — прилагаются.
Читать 📍 https://habr.com/ru/company/vk/blog/658251/
Представьте себе выход на биржу очень крупной компании (как Сбербанк). Листинг их ценных бумаг может аффектиться другими процессами на бирже, поэтому для минимизации рисков и чтобы сделка не сорвалась биржи запускают такие вещи на отдельных торговых ядрах.
Статья Олега Уткина из отдела архитектуры систем хранения данных Tarantool как раз об этом. Читайте, как консолидировать потоки данных из разных торговых систем и наладить их доставку клиентам. Много граблей и несколько интересных выводов — прилагаются.
Читать 📍 https://habr.com/ru/company/vk/blog/658251/
Хабр
Угнать за 5 миллисекунд: как мы наладили быструю доставку данных в сложной биржевой системе с помощью Tarantool
Привет! На связи Олег Уткин из отдела архитектуры систем хранения данных Tarantool. Я хочу рассказать, как в ходе проекта для Московской биржи мы консолидировали потоки данных из разных торговых...
❤3👍3
13 и 14 мая мы встретимся на конференции HighLoad++ Foundation в Москве.
Пожалуй, никогда у нас не было столько вопросов о том, как будет трансформироваться IT-отрасль в ближайшее время. Не пропустите — сейчас очень важно обсудить не только хардовые технические вопросы, но и выстроить стратегию дальнейшего развития.
Напоминаем — чем ближе к конференции, тем дороже билеты. Следующее повышение 15 апреля. Если вы не успели согласовать своё участие в этом событии, просто забронируйте билет, и у вас будет ещё несколько дней на оплату.
Забронировать билет на HighLoad++ Foundation 👉 https://clck.ru/eoCCD
Пожалуй, никогда у нас не было столько вопросов о том, как будет трансформироваться IT-отрасль в ближайшее время. Не пропустите — сейчас очень важно обсудить не только хардовые технические вопросы, но и выстроить стратегию дальнейшего развития.
Напоминаем — чем ближе к конференции, тем дороже билеты. Следующее повышение 15 апреля. Если вы не успели согласовать своё участие в этом событии, просто забронируйте билет, и у вас будет ещё несколько дней на оплату.
Забронировать билет на HighLoad++ Foundation 👉 https://clck.ru/eoCCD
👍2
Всем привет!
В рамках Highload++ Foundation приглашаем вас посетить Яндекс-трек!
Трек Яндекс — это 2 полных дня, объединенные разными темами.
🔹13 мая мы погрузимся в надежность и отказоустойчивость (проблемы больших систем).
🔹14 мая обсудим Machine learning в Highload.
👉 Трек будет проходить в зале «Трантор». Расписание можно посмотреть на сайте: https://clck.ru/ezwJ7
✅ Если вы еще не забронировали билет, то самое время это сделать: https://clck.ru/ezxY8
В рамках Highload++ Foundation приглашаем вас посетить Яндекс-трек!
Трек Яндекс — это 2 полных дня, объединенные разными темами.
🔹13 мая мы погрузимся в надежность и отказоустойчивость (проблемы больших систем).
🔹14 мая обсудим Machine learning в Highload.
👉 Трек будет проходить в зале «Трантор». Расписание можно посмотреть на сайте: https://clck.ru/ezwJ7
✅ Если вы еще не забронировали билет, то самое время это сделать: https://clck.ru/ezxY8
🔥4👍1
Опыт эксплуатации Mellanox под управлением Switchdev
Switchdev — это инфраструктура в ядре Linux для отображения сетевых настроек ядра в железо. Одним из примеров подобного железа (whitebox switches) являются коммутаторы Mellanox, на которых можно запустить любой Linux-дистрибутив. Эти коммутаторы можно использовать как Whitebox, они поддерживают и perl-скрипты, с помощью которых можно автоматизировать управление сетевой конфигурацией.
Дмитрий Шемонаев, руководитель центра сетевых операций в компании Qrator Labs, сегодня расскажет, как это выглядит на практике.
Читать 📍 https://habr.com/ru/company/oleg-bunin/blog/661643/
Switchdev — это инфраструктура в ядре Linux для отображения сетевых настроек ядра в железо. Одним из примеров подобного железа (whitebox switches) являются коммутаторы Mellanox, на которых можно запустить любой Linux-дистрибутив. Эти коммутаторы можно использовать как Whitebox, они поддерживают и perl-скрипты, с помощью которых можно автоматизировать управление сетевой конфигурацией.
Дмитрий Шемонаев, руководитель центра сетевых операций в компании Qrator Labs, сегодня расскажет, как это выглядит на практике.
Читать 📍 https://habr.com/ru/company/oleg-bunin/blog/661643/
Хабр
Опыт эксплуатации Mellanox под управлением Switchdev
Мы уже писали про Linux Switchdev в Mellanox — что это такое и как мы с ним живем в Qrator Labs. Сегодня я хочу рассмотреть этот вопрос с другой стороны. Меня зовут Дмитрий Шемонаев , я руковожу...
👍2
✅ Хотите за неделю прокачать hard- и soft-skills?
До 13 мая у вас есть возможность купить билеты сразу на две конференции и сэкономить.
Комбо-билет на HighLoad++ Foundation и TeamLead Conf Foundation со скидкой 30% на обе конференции.
Каждая конференция — это уникальная программа. Каждый доклад - решение конкретной задачи разработки.
Вы сможете лично пообщаться с лидерами отрасли, единомышленниками, найти пути решения своих задач, получить профессиональную консультацию.
На каждой конференции IT-гиганты презентуют новейшие технологические и управленческие решения. Не упустите шанс узнать о новинках первыми!
👉🏻 Подробности — по ссылке - https://clck.ru/g9sLv
До 13 мая у вас есть возможность купить билеты сразу на две конференции и сэкономить.
Комбо-билет на HighLoad++ Foundation и TeamLead Conf Foundation со скидкой 30% на обе конференции.
Каждая конференция — это уникальная программа. Каждый доклад - решение конкретной задачи разработки.
Вы сможете лично пообщаться с лидерами отрасли, единомышленниками, найти пути решения своих задач, получить профессиональную консультацию.
На каждой конференции IT-гиганты презентуют новейшие технологические и управленческие решения. Не упустите шанс узнать о новинках первыми!
👉🏻 Подробности — по ссылке - https://clck.ru/g9sLv
Forwarded from Онтико
Друзья, добрый день!
Мы вышли на финишную прямую в подготовке Foundation-конференций в мае. Конференции обязательно состоятся, именно сейчас профессиональное общение важно, как никогда.
Профессиональная конференция для разработчиков высоконагруженных систем HighLoad++ Foundation пройдёт 13 и 14 мая, а самая крупная мультиформатная конференция для тимлидов и руководителей TeamLead Foundation ― 17 и 18 мая.
Расписания пересобраны, на HighLoad++ вас ждут 128 докладов, 3 круглых стола, 4 мастер-класса и выставка 54 партнёра (абсолютный рекорд среди всех айтишных конференций). Кстати, на HighLoad++ пройдёт целый трек от конференции GolangConf ― то есть для вас работали целых три программных комитета (HighLoad++, DevOps и Golang) - всего более 50 профессионалов.
В программу добавлены антикризисные секции ― мы поговорим об импортозамещении (реальном, а не показном), о безопасности и закладках, о следующих волнах IT-санкций, о подготовке к резкому росту нагрузки и перестройке инфраструктуры.
Программа TeamLead ― самая большая из всех, когда либо собранных! Всего 94 события (8 параллельных треков), в которых 12 мастер-классов и митапов, 27 докладов от конференции по управлению знаниями KnowledgeConf и 4 круглых стола.
У TeamLead Foundation 23 партнёра и этого тоже никогда не было на конференциях по управлению.
Итак, мы ждём вас! Брошюры в печати, площадка и питание заказаны (и даже оплачены). Кстати, на обе конференции мы ждём в общей сложности более 5000 участников.
Присоединяйтесь, самые крупные профессиональные события отрасли уже через три недели!
Мы вышли на финишную прямую в подготовке Foundation-конференций в мае. Конференции обязательно состоятся, именно сейчас профессиональное общение важно, как никогда.
Профессиональная конференция для разработчиков высоконагруженных систем HighLoad++ Foundation пройдёт 13 и 14 мая, а самая крупная мультиформатная конференция для тимлидов и руководителей TeamLead Foundation ― 17 и 18 мая.
Расписания пересобраны, на HighLoad++ вас ждут 128 докладов, 3 круглых стола, 4 мастер-класса и выставка 54 партнёра (абсолютный рекорд среди всех айтишных конференций). Кстати, на HighLoad++ пройдёт целый трек от конференции GolangConf ― то есть для вас работали целых три программных комитета (HighLoad++, DevOps и Golang) - всего более 50 профессионалов.
В программу добавлены антикризисные секции ― мы поговорим об импортозамещении (реальном, а не показном), о безопасности и закладках, о следующих волнах IT-санкций, о подготовке к резкому росту нагрузки и перестройке инфраструктуры.
Программа TeamLead ― самая большая из всех, когда либо собранных! Всего 94 события (8 параллельных треков), в которых 12 мастер-классов и митапов, 27 докладов от конференции по управлению знаниями KnowledgeConf и 4 круглых стола.
У TeamLead Foundation 23 партнёра и этого тоже никогда не было на конференциях по управлению.
Итак, мы ждём вас! Брошюры в печати, площадка и питание заказаны (и даже оплачены). Кстати, на обе конференции мы ждём в общей сложности более 5000 участников.
Присоединяйтесь, самые крупные профессиональные события отрасли уже через три недели!
highload.ru
Крупнейшая профессиональная конференция для разработчиков высоконагруженных систем 2022
🔥5👍2
Всем привет!
Как создать автоматизацию детекции и оценки сбоев в Production – узнаем у Дмитрия Химион из Авито.
https://clck.ru/gN4Et
В своем докладе Дмитрий расскажет про опыт Авито в области автоматизации работы со сбоями, как создать подобный механизм (где можно оступиться и в каких условиях автоматизацию вряд ли получится реализовать) и взять работу вашего продукта под контроль — измеримо и увидеть актуальные и ключевые проблемы вашего продукта и инженерии.
✅ Ждем вас на HighLoad++ 13 и 14 мая в Москве. Подробное расписание и билеты на сайте – https://clck.ru/gN4DV
Как создать автоматизацию детекции и оценки сбоев в Production – узнаем у Дмитрия Химион из Авито.
https://clck.ru/gN4Et
В своем докладе Дмитрий расскажет про опыт Авито в области автоматизации работы со сбоями, как создать подобный механизм (где можно оступиться и в каких условиях автоматизацию вряд ли получится реализовать) и взять работу вашего продукта под контроль — измеримо и увидеть актуальные и ключевые проблемы вашего продукта и инженерии.
✅ Ждем вас на HighLoad++ 13 и 14 мая в Москве. Подробное расписание и билеты на сайте – https://clck.ru/gN4DV
Тысяча и один бэкап: как мы ускорили создание резервных копий на OpenStack в 10 раз
В облаке может умереть гипервизор и потеряться состояние памяти. И когда дело дойдет до восстановления данных, то в памяти, скорее всего, ничего не останется. Поэтому самое главное в виртуальной машине — это диски и наличие консистентных резервных копий. Но чтобы эти копии создавались быстро, приходится поплясать с бубном.
Читайте в статье Артемия Капитулы, ведущего программиста в команде разработки Compute и Storage VK Cloud Solutions как можно модернизировать архитектуру бэкапов на базе OpenStack в публичном облаке, чтобы ускорить их создание в 10 раз.
Читать 📍 https://habr.com/ru/company/vk/blog/661553/
В облаке может умереть гипервизор и потеряться состояние памяти. И когда дело дойдет до восстановления данных, то в памяти, скорее всего, ничего не останется. Поэтому самое главное в виртуальной машине — это диски и наличие консистентных резервных копий. Но чтобы эти копии создавались быстро, приходится поплясать с бубном.
Читайте в статье Артемия Капитулы, ведущего программиста в команде разработки Compute и Storage VK Cloud Solutions как можно модернизировать архитектуру бэкапов на базе OpenStack в публичном облаке, чтобы ускорить их создание в 10 раз.
Читать 📍 https://habr.com/ru/company/vk/blog/661553/
Хабр
Тысяча и один бэкап: как мы ускорили создание резервных копий на OpenStack в 10 раз
Full Force by Jetfreak-7 В облаке может умереть гипервизор и потеряться состояние памяти. И когда дело дойдет до восстановления данных, в памяти, скорее всего, ничего не останется. Поэтому самое...
👍3
Всем привет!
На конференции HighLoad++ Ибрагим Бадертдинов и Александр Абрамов из SberDevices расскажут об ускорении и облегчение моделей для поддержания диалога виртуальных ассистентов Салют
📋 https://clck.ru/gcoZi
Команда SberDevices активно разрабатывает виртуальных ассистентов Салют. Они используют технологии AI для распознавания голоса и обработки естественного языка, чтобы их помощники умели вести беседу и приносили реальную пользу людям.
Для этого им постоянно приходится решать различные NLP-задачи. Они адаптируют и обучают большие языковые модели на базе трансформеров (BERT, GPT), которыми делятся с сообществом в open source.
В рамках доклада Ибрагим и Александр поделятся своими практиками, как эффективно обучать большие multitask-модели, быстро собирать необходимые данные и, самое главное, как оптимизировать использование ресурсов памяти и ускорять модели в продакшне.
✅ Встречаемся на HighLoad++ 13 и 14 мая в Москве. Подробная информация и билеты на сайте - https://clck.ru/gcoZU
На конференции HighLoad++ Ибрагим Бадертдинов и Александр Абрамов из SberDevices расскажут об ускорении и облегчение моделей для поддержания диалога виртуальных ассистентов Салют
📋 https://clck.ru/gcoZi
Команда SberDevices активно разрабатывает виртуальных ассистентов Салют. Они используют технологии AI для распознавания голоса и обработки естественного языка, чтобы их помощники умели вести беседу и приносили реальную пользу людям.
Для этого им постоянно приходится решать различные NLP-задачи. Они адаптируют и обучают большие языковые модели на базе трансформеров (BERT, GPT), которыми делятся с сообществом в open source.
В рамках доклада Ибрагим и Александр поделятся своими практиками, как эффективно обучать большие multitask-модели, быстро собирать необходимые данные и, самое главное, как оптимизировать использование ресурсов памяти и ускорять модели в продакшне.
✅ Встречаемся на HighLoad++ 13 и 14 мая в Москве. Подробная информация и билеты на сайте - https://clck.ru/gcoZU
👍2🔥1
Всем привет!
На конференции Highload++ выступит Тимур Давыдов из Московской Биржи.
📋https://clck.ru/gdgcR
В своем докладе он рассмотрит архитектуру современной торгово-клиринговой системы (ТКС), а также более подробно познакомит с in-memory-базой данных, оптимизированной для работы с низкими и предсказуемыми задержками, предназначенной для хранения информации во время работы ТКС.
В связи с изменением поведения рынков со временем и требованием хранения большего количества информации, были сделаны оптимизации как в самом представлении данных, так и в организации базы данных. Но одна проблема все еще оставалась нерешенной — это выделение оптимального объема памяти для каждой таблицы БД с расчетом на худший случай. Поэтому в докладе также будут рассмотрены способы увеличения объема непрерывной области данных в памяти и предложена оптимальная реализация технологии динамического увеличения непрерывной области данных в памяти за константное время.
✅ Встречаемся на HighLoad++ 13 и 14 мая – https://clck.ru/gdgc9
На конференции Highload++ выступит Тимур Давыдов из Московской Биржи.
📋https://clck.ru/gdgcR
В своем докладе он рассмотрит архитектуру современной торгово-клиринговой системы (ТКС), а также более подробно познакомит с in-memory-базой данных, оптимизированной для работы с низкими и предсказуемыми задержками, предназначенной для хранения информации во время работы ТКС.
В связи с изменением поведения рынков со временем и требованием хранения большего количества информации, были сделаны оптимизации как в самом представлении данных, так и в организации базы данных. Но одна проблема все еще оставалась нерешенной — это выделение оптимального объема памяти для каждой таблицы БД с расчетом на худший случай. Поэтому в докладе также будут рассмотрены способы увеличения объема непрерывной области данных в памяти и предложена оптимальная реализация технологии динамического увеличения непрерывной области данных в памяти за константное время.
✅ Встречаемся на HighLoad++ 13 и 14 мая – https://clck.ru/gdgc9
👍3🔥2
⚡️ Готовьте вопросы! Кроме 9 потоков докладов, в Крокус Экспо будут экспертные тематические зоны, где вы сможете получить консультацию ведущих специалистов компаний.
В экспертной зоне Яндекса можно обсудить распределённые высоконагруженные системы хранения и обработки данных, CatBoost, машинное обучение в области рекомендательных систем и другие темы. Разработчики поделятся практическим опытом и посоветуют, как реализовать технологии в вашем проекте.
Если у вас уже сейчас есть вопрос по этим темам, отправьте его через форму на странице про экспертные зоны: https://clck.ru/geojk
В экспертной зоне Яндекса можно обсудить распределённые высоконагруженные системы хранения и обработки данных, CatBoost, машинное обучение в области рекомендательных систем и другие темы. Разработчики поделятся практическим опытом и посоветуют, как реализовать технологии в вашем проекте.
Если у вас уже сейчас есть вопрос по этим темам, отправьте его через форму на странице про экспертные зоны: https://clck.ru/geojk
👍2
Всем привет!
Продолжаем знакомить вас со спикерами HighLoad++. Одним из них станет руководитель разработки пилотных проектов компании Tarantool - Дмитрий Самиров.
📋 https://clck.ru/gf25x
В своем докладе он расскажет о том, как в прошлом году команде разработчиков необходимо было с нуля за 2 месяца создать систему хранения товаров и остатков для магазинов Магнита. А ведь эта задача была не из легких.
✔️Дмитрий расскажет о том:
* как написанный в короткие сроки пилотный проект внезапно для всех превратился в хайлоад-сервис, который должен держать нагрузку 200 000 запросов в секунду;
* какие ошибки были допущены при проектировании сервиса, и как они их исправляли;
* с какими проблемами они столкнулись при масштабировании своей системы.
✅ Встречаемся на HighLoad++ 13 и 14 мая в Москве. Подробная информация и билеты на сайте – https://clck.ru/gf292
Продолжаем знакомить вас со спикерами HighLoad++. Одним из них станет руководитель разработки пилотных проектов компании Tarantool - Дмитрий Самиров.
📋 https://clck.ru/gf25x
В своем докладе он расскажет о том, как в прошлом году команде разработчиков необходимо было с нуля за 2 месяца создать систему хранения товаров и остатков для магазинов Магнита. А ведь эта задача была не из легких.
✔️Дмитрий расскажет о том:
* как написанный в короткие сроки пилотный проект внезапно для всех превратился в хайлоад-сервис, который должен держать нагрузку 200 000 запросов в секунду;
* какие ошибки были допущены при проектировании сервиса, и как они их исправляли;
* с какими проблемами они столкнулись при масштабировании своей системы.
✅ Встречаемся на HighLoad++ 13 и 14 мая в Москве. Подробная информация и билеты на сайте – https://clck.ru/gf292
👍8
Привет, друзья!
О SLI/SLO/SLA в микросервисном приложении поговорим на выступлении Павла Лакосникова из Авито.
📋 https://clck.ru/gfFUW
Всё больше и больше приложений уходят из монолита в микросервисы. Микросервисов становится много, и зоны ответственности размываются. Становится сложно понять, как подсчитать надёжность приложения и как она коррелирует с микросервисами.
Доклад про понятия SLI/SLO/SLA и то, как разработчики трактуют их в Авито. На выступлении узнаем о подходах к измерению надёжности как микросервисов в частности, так и микросервисного приложения в общем.
Павел расскажет, для чего вообще стоит этим заниматься.
✅ Спешите запланировать свое участие в HighLoad++. Конференция уж совсем скоро! Расписание и билеты - https://clck.ru/gfFhZ
О SLI/SLO/SLA в микросервисном приложении поговорим на выступлении Павла Лакосникова из Авито.
📋 https://clck.ru/gfFUW
Всё больше и больше приложений уходят из монолита в микросервисы. Микросервисов становится много, и зоны ответственности размываются. Становится сложно понять, как подсчитать надёжность приложения и как она коррелирует с микросервисами.
Доклад про понятия SLI/SLO/SLA и то, как разработчики трактуют их в Авито. На выступлении узнаем о подходах к измерению надёжности как микросервисов в частности, так и микросервисного приложения в общем.
Павел расскажет, для чего вообще стоит этим заниматься.
✅ Спешите запланировать свое участие в HighLoad++. Конференция уж совсем скоро! Расписание и билеты - https://clck.ru/gfFhZ
👍6
Как мы построили корпоративную шину данных на Kafka, которая обрабатывает до 3 млн сообщений в секунду
Среднее количество сообщений, которые обрабатывается в Почте России — от 500 тысяч до миллиона в секунду. В пики, когда big data прогоняет свои 25 петабайт данных — до 3 миллионов. При этом кластер Kafka состоит всего из 12 серверов в каждом из 3 дата-центров. И справляется с этим.
Как это возможно — рассказал в статье Иван Гаас, руководитель автоматизации процессов разработки в Почтатех. Читайте, как корпоративная шина на Kafka помогает теперь быстро масштабироваться и интегрировать каждый новый сервис всего за несколько дней.
Читать 📍 https://habr.com/ru/company/posttech/blog/663306/
Среднее количество сообщений, которые обрабатывается в Почте России — от 500 тысяч до миллиона в секунду. В пики, когда big data прогоняет свои 25 петабайт данных — до 3 миллионов. При этом кластер Kafka состоит всего из 12 серверов в каждом из 3 дата-центров. И справляется с этим.
Как это возможно — рассказал в статье Иван Гаас, руководитель автоматизации процессов разработки в Почтатех. Читайте, как корпоративная шина на Kafka помогает теперь быстро масштабироваться и интегрировать каждый новый сервис всего за несколько дней.
Читать 📍 https://habr.com/ru/company/posttech/blog/663306/
Хабр
Как мы построили корпоративную шину данных на Kafka, которая обрабатывает до 3 млн сообщений в секунду
Привет! Меня зовут Иван Гаас, я руковожу автоматизацией процессов разработки в Почтатехе — компании, создающей цифровые продукты для Почты России. Среднее количество сообщений, которые мы обрабатываем...
👍6👎1