⠀
📋 https://bit.ly/3Og2UAF
⠀
Зачастую пользователь принимает решение о клике, во многом основываясь на графической информации. Рассмотрим различные способы использования изображений в рекомендательных системах и узнаем про уменьшение нагрузки и влезание в память при исполнении данного подхода.
⠀
Руслан поделится с участниками кейсами, как им удалось улучшить свою систему на 20%!
⠀
Присоединяйтесь к нам 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2
⠀
QA automation engineer в Garage Eight Константин Лыщенко расскажет, как они улучшали свою автотестовую систему. Как дорабатывали pipeline с прогоном тестов. Как делали отчёты в Slack удобнее и внедряли автоматизированный сбор метрик с использованием Grafana и MySQL.
⠀
Улучшения помогли сделать pipelin’ы с автотестами более быстрыми, а это полезный опыт, который можно использовать в своей системе.
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2🔥1
⠀
📋 https://bit.ly/3M6VKf5
⠀
На данный момент существуют сотни языков программирования, которые можно использовать для разработки backend. Как выбрать язык, который даст наибольшее количество преимуществ, но не в ущерб результату?
⠀
Сравним 10 наиболее популярных языков программирования по ключевым критериям:
⠀
- кадровый вопрос;
- удобство разработки;
- выразительность языка;
- производительность.
⠀
Также обсудим, в чём уникальность Elixir: BEAM, OTP, модель акторов и то, как Elixir расширяет мышление в плане подходов к написанию кода. Посмотрим, какие компании уже применяют Elixir для разработки своих сервисов.
⠀
Встречаемся 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
👍3
⠀
Руководитель DevOps, QA и 140+ backend/fronted-разработчиков в Ситилинке Константин Осипов поможет ответить на него. Вы узнаете, как перестать быть эникейщиком и снова начать автоматизировать. Как отсутствие DevOps ускоряет Time to market. Как всего три DevOps справляются со 150+ разработчиками, 70+ Tarantool БД, 100+ микросервисов, и еще успевают готовить свой on-premises Kubernetes на сотнях серверов.
⠀
Разговор пойдет об интересном подходе к разработке в Ситилинке, который и позволяет справляться со всеми перечисленными проблемами.
⠀
📍Читать статью: https://habr.com/ru/companies/oleg-bunin/articles/728524/
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Почему ваши DevOps – эникейщики
Представьте, что есть проект, где 200 разработчиков, 20+ независимых продуктовых команд и у каждой свой собственный DevOps. Они всё автоматизируют — все довольны и занимаются исключительно своей...
👍1
⠀
📋 https://bit.ly/3BAAREu
⠀
Всё, что вы хотели узнать про дата-центр Яндекса, но боялись спросить.
⠀
Пора узнать, как Яндекс подходит к процессу проектирования, строительства и эксплуатации своих дата-центров.
⠀
Как собственные разработки Яндекса влияют на применение и повсеместное внедрение новых технологий в своих дата-центрах, и какую роль в этом играют серверы собственной разработки и производства.
⠀
Поговорим о том, как охлаждать серверы воздухом с улицы и не тратить при этом дополнительные деньги. А также узнаем, сколько человек нужно, чтобы обслуживать дата-центр, по мощности равный небольшому городу.
⠀
Присоединяйтесь к нам 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6👍4👏1🤩1🙏1
⠀
📋 https://bit.ly/3MC42gq
⠀
Yandex Monitoring используется всеми сервисами Яндекса внутри, а также доступен в Яндекс.Облако для внешних пользователей. Они обрабатывают 700 миллионов метрик на запись ежесекундно.
⠀
У каждого клиента есть конфигурация процесса загрузки метрик. Конфигурация — это Control-Plane-объекты, которые:
⠀
- хранятся как таблицы в базе данных;
- меняются на лету;
- связаны между собой.
⠀
Чем быстрее Monitoring получает обновления объектов, тем выше доступность для пользователей.
⠀
Для хранения они используют YDB — распределенную open-source-базу данных Яндекса.
⠀
Команды YDB и Yandex Monitoring проработали сценарий загрузки изменений с помощью YDB CDC. В результате получили архитектуру, в которой изменения объектов доставляются в тысячи компонентов менее чем за 800 миллисекунд.
⠀
Из доклада Егора узнаем:
⠀
- Сложности до перехода на Change Data Capture.
- Подходы к доставке изменений, их особенности.
- Чем YDB CDC отличается от других решений.
- Рекомендации, как правильно готовить YDB CDC, грабли и их решения.
- Какую модель данных выбрать, чтобы решить проблемы с конкурентными изменениями.
- Мониторинг и поддержка решения.
⠀
Встречаемся 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
❤5👍3🔥2💯1😎1
⠀
📋 https://bit.ly/3Wg0bch
⠀
Авито Автозагрузка — продукт, через который каждый час проходят десятки миллионов объявлений. За сутки мы скачиваем миллионы фотографий с хостингов самого разного качества и стабильности.
⠀
На таком объёме данных простая, на первый взгляд, задача «скачай фото по ссылке» обрастает большим количеством проблем:
⠀
- что делать с медленными и нестабильными хостами;
- как не устроить DDoS-атаку на сервера клиентов;
- как обеспечить высокую производительность системы и не вызывать негатив у пользователей.
⠀
Если прибавить сюда резкий кратный рост продукта, то мы получим интересную историю о том, как за год они выросли в 4 раза и полностью переосмыслили и переработали архитектуру своей “фотокачалки”. Вместе мы пройдем путь от решения “в лоб” до решения, сумевшего ответить на все эти (и не только) вопросы.
⠀
Ждем вас 26 и 27 июня в Питере на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
❤5👍3🔥1
⠀
📋 https://bit.ly/43hUBsg
⠀
Tarantool прошёл большой путь в репликации. Начиналось всё с master-replica без поддержки транзакций, затем появилась поддержка master-master, потом и поддержка транзакций. Одновременно с этим появились нереплицируемые таблицы. Последним нововведением стала синхронная репликация и автоматические выборы лидера.
⠀
Все эти изменения они старались проводить эволюционно, минимально затрагивая протокол: например, мастер может реплицировать часть таблиц асинхронно, а часть – синхронно. И, если синхронная репликация не используется, Tarantool новой версии может быть и мастером, и репликой для Tarantool старой версии.
⠀
Сергей расскажет, что менялось в протоколе репликации на протяжении последних 10 лет, как они сохраняют совместимость и баланс между существующими режимами работы и появляющимися фичами и как работают над удобством эксплуатации кластера. Также поговорим об их дальнейших планах.
⠀
До встречи 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5❤2👍2👏1
⠀
Проходите, изучайте и планируйте свое участие: https://bit.ly/42UVfvS
⠀
До встречи 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
⚡5❤🔥2🔥2👍1
⠀
С 1 июня цена билетов на Saint HighLoad++ 2023 вырастет. Забронируйте билет до 31 мая и у вас еще будет несколько дней на оплату.
⠀
Присоединяйтесь к нам, чтобы:
⠀
- освежить мысли и найти новые идеи после докладов и общения
- первыми поймать тренды и узнать изменения в индустрии
- увидеть, как делают IT-системы другие спецы
- значительно вырасти профессионально
- отлично провести время в крутой тусовке единомышленников
⠀
⠀
Ждем вас на Saint HighLoad++ 2023 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥2⚡1👍1😎1
⠀
📋 https://bit.ly/420Uj8a
⠀
Поговорим вот о чем:
⠀
- Перенос legacy PHP-FPM в Kubernetes.
- Горизонтальное масштабирование PHP-FPM.
- Деплой во время нагрузки.
⠀
Присоединяйтесь к нашей крутой тусовке разработчиков высоконагруженных систем 26 и 27 июня в Санкт-Петербурге 😎
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥3👍2❤1❤🔥1
⠀
📋 https://bit.ly/3olBSxb
⠀
Когда был только Firebase, все было просто. Теперь тренды меняются, появился HMS, появляются региональные решения. Артем расскажет, как охватить большую аудиторию, используя не только Firebase.
⠀
Узнаем:
⠀
- Как добиться лучшей доставляемости уведомлений, используя сразу несколько транспортов для пуш-уведомлений.
- Дополнительные плюшки — уверенность, что пуш не доставлен, локализация уведомлений, периодические кампании рассылок.
- Что будет дальше, какие альтернативные решения появятся, и что можно уже тестировать. Есть ли будущее у unifiedpush.
⠀
Ждем вас 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
❤2👍2
⠀
📋 https://bit.ly/3oyHnbN
⠀
Соберем в прямом эфире свой умный дом на четырех платформах.
⠀
Каждый умный дом будет прост, доступен, дешев. И он будет позволять реализовывать наши самые смелые идеи и пожелания.
⠀
Присоединяйтесь к нашей крутой тусовке разработчиков высоконагруженных систем 26 и 27 июня в Санкт-Петербурге 😎
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
⠀
Олег Мифле расскажет как работал в команде Customer Support. Одна из фишек проекта — приоритизация тикетов. Команде прилетают 100-200 задач в минуту: ученик пропустил урок или его нужно разбудить, опоздал учитель, возникла другая проблема. А дальше этот поток тасков нужно упорядочить по важности, пропустив горящие вперед.
⠀
О приоритизации со стороны разработки и бизнеса и дереве игры и пойдёт речь. Поговорим какие коэффициенты и подходы использовать для расчета веса и почему. О добавлении универсальных стратегий, ручных, автоматических и отложенных задачах. О том, как SLA влияет на вес задачи.
⠀
📍Читать статью: https://habr.com/ru/companies/oleg-bunin/articles/737218/
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Анализ и приоритизация задач в тикетной системе: реализуем красиво на PHP
Привет! Меня зовут Олег Мифле. Одной из команд, где удалось поработать за 7 лет с PHP, стала Customer Support. Мы автоматизировали анализ тысяч задач в день и оператору больше не нужно думать и...
⠀
📋 https://bit.ly/43JtZAL
⠀
Мир генеративного искусства стремительно развивается, создание фантастических и при этом реалистичных изображений уже не кажется магией. Но и возможности методов генерации неуклонно растут. 2022-й год завершился бумом в персонализации text-to-image-моделей — в академической среде выходили статьи с различными подходами, а в продовой — конкретные решения, на них основанные.
⠀
Поговорим о диффузионных генеративных моделях и методах персонализации, а также о том, как их использовать в реальном продакшне:
⠀
- Сначала немного погрузимся в прекрасный мир теории и поймем две основные вещи: как работают диффузионные генеративные модели на примере Stable Diffusion; и как заставить их генерировать неизвестные для них объекты, например, вас или вашу любимую собаку, с помощью DreamBooth и его модификаций.
⠀
- Затем спустимся на землю, чтобы столкнуться с суровой реальностью. Однако справимся со всеми (почти) проблемами: будем кэшировать вычисления модели, считать attention эффективно, и научимся дообучать большие модели, не имея больших ресурсов.
⠀
Присоединяйтесь к нам 26 и 27 июня на Saint HighLoad++ 2023 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
⠀
Друзья, чем ближе конференция, тем дороже билеты. С 1 июня цена вырастет и станет максимальной. Забронируйте билет до 31 мая и у вас будет несколько дней для оплаты.
⠀
В программе Saint HighLoad++ 2023 вас ждут 70+ докладов, которые охватят такие аспекты веб-разработок: архитектуры крупных проектов, базы данных и системы хранения, devops и системное администрирование, нагрузочное тестирование, эксплуатация крупных проектов. И другие направления, связанные с большими и высоконагруженными IT-системами.
⠀
Форматы конференции и доступные опции:
⠀
▪️Офлайн: общение со спикерами, глубокая проработка тем на митапах, доступ к выставочной зоне, все презентации спикеров, видеозаписи всех докладов, сытные кофебрейки и обеды, подарки от партнёров и организаторов, вопросы спикерам в telegram-чате
⠀
▫️Онлайн: все презентации спикеров, видеозаписи всех докладов, трансляция всех докладов (кроме митапов и воркшопов), вопросы спикерам в telegram-чате, доступ к трансляции для одного пользователя
⠀
Ждем вас 26 и 27 июня в Питере или онлайн по всему миру 🙌
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
❤2👍2🔥1🎉1
⠀
Вас ждет:
⠀
▪️14 разносторонних докладов об архитектуре высоконагруженных проектов помогут посмотреть на свои задачи под новым углом и найти качественно новые решения.
⠀
▪️За два дня на опыте больших и известных компаний мы исследуем архитектуру со всех ракурсов: от слоя хранения до верификации, от CDN до телекома, от legacy начала века до микросервисов.
⠀
▪️В рамках трека пройдет «Прожарка кейсов»! Вы сможете приземлить советы спикеров на собственные проекты. Топовые профессионалы IT-отрасли разберут архитектурные решения участников по косточкам, укажут на слабые места и зададут направление для роста.
⠀
⠀
До встречи 26 и 27 июня на Saint HighLoad++ 2023 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
👍6⚡1🎉1
📋 https://bit.ly/439WNlV
Поговорим о том, какие бывают статические анализаторы, их отличия и сравнение между собой.
Алексей расскажет, как сделать этот инструмент эффективным оружием по поиску уязвимостей, и покажет, какие уязвимости можно найти с помощью SAST.
Присоединяйтесь к нам на Saint HighLoad++ 2023
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2❤1
Врываемся в лето жаркой новостью!
У нас полным ходом идет подготовка и прием докладов к HighLoad++ 2023, Москва, Сколково, 27-28 ноября.
🖐️ И, не изменяя традиции, мы собираемся на офлайн-встречу активистов, потенциальных докладчиков и участников ПК. На этот раз идем в гости к Яндексу на Дачу
Вечер обещает быть насыщенным: обсудим с вами новости и планы, поговорим о том, что болит и волнует, обменяемся идеями, чтобы следующий HighLoad стал еще мощнее!
Когда: 8 июня (четверг)
Сбор участников с 19:00, официальная часть с 19:30
Где: Москва, культурный центр "Плюс Дача", в самом центре Парка Горького.
Ждем вас 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
❤5🔥5👍3
⠀
Давайте посмотрим как у них это получилось и с какими проблемами они столкнулись во время перехода на Machine Learning-кластера.
⠀
Разговор пойдёт о революции трансформеров, современных HPC/GPU-кластерах, на каком стеке технологий их строят и почему перестают работать традиционные подходы. В общем все про ускорение машинного обучения и оптимизацию производительности.
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Построение HPC/GPU кластеров для машинного обучения
За последние несколько лет машинное обучение сильно изменилось. В обиход вошли так называемые Fundation model. Вы обучаете одну огромную общую модель, которая умеет делать почти всё одинаково. Это как...
👍2