SberProfi DWH/BigData
1.06K subscribers
323 photos
9 videos
362 links
Telegram-канал SberProfi DWH/BigData 💚
Наш чат: https://t.iss.one/+6Vc_rNMJl8MzYzcy
Наша миссия: развивать компетенции по технологиям работы с данными, например, такими, как экосистема Hadoop, Teradata, Oracle DB, GreenPlum и др.
Download Telegram
Ни одного митапа без DWH/BigData

В нашем Сообществе десятки и сотни команд каждый день разрабатывают и развивают внешние и внутренние продукты, обсуждают функционал, фичи и идеи. И, конечно, всегда готовы делиться опытом😊

11 сентября эксперты DWH/BigData Александр Стрелков и Сергей Лебедев приняли участие в масштабном мероприятии «Arch.Meetup by Sber: современное управление архитектурой данных».

Организаторами выступили наши коллеги и друзья из Architecture Community💚

Более 250 человек познакомились с продуктами SberData на стендах Sber Innovations:

👉🏻 Александр Стрелков приехал из Санкт-Петербурга, чтобы лично представить SDP Beholder – сервис мониторинга и управления нагрузкой на кластерах Greenplum

👉🏻 Сергей Лебедев представил средство маркирования данных Sber Data Guard

Судя по количеству вопросов к нашим стендистам и активному обмену визитками, продукты точно вызвали интерес 😉 

А как насчет повторить опыт со стендами? Ставьте реакции, если ждёте ОЧНОЕ мероприятие в сообществе DWH/BigData 🔥
🔥61👍1
Более 150 участников, 3 доклада и 7 спикеров - все это 59-й митап DWH/BigData
 
Собрали для вас основные новости мероприятия👌

🔹Доказали практическую возможность запуска ПИМ на GPU
🔹Обсудили технологию аналитики с временными рядами, как простыми, так и многомерными
🔹Узнали, как GigaChat сокращает время найма IT-сотрудников на 50% и кто такой AI-рекрутер
🔹Получили заряд энергии и мотивации
 
Свежий Data-контент представили:

- Андрей Степанов (SberData), Алексей Евсюгин (Департамент данных и рекомендательных систем B2C)
- Андрей Емельянов, Андрей Ветров, Руслан Мурадымов (SberData)
- Максим Радионов, Владимир Зворыгин (SberData)
 

Запись митапа вы найдете в СберВидео, а материалы встречи можно посмотреть в Друге и на странице в Confluence.
 
Если вы были с нами, поделитесь впечатлениями в комментариях под этим постом ☀️
 

С уважением,
команда DWH/BigData 💚
👍4
Друзья, привет!
 
Знаете ли вы, что в 2025 году планируется переход на MLStorage, который заменит Bitbucket и Nexus в части хранения артефактов моделирования?🧐
 
Приглашаем обсудить новый инструмент для хранения моделей на митапе!
 
👥 Эксперты встречи: Юлия Ступак, Сергей Иванов, Владимир Медин
 
На примере кейсов и опыта мы обсудим:
 
🔹 для решения каких задач предназначен новый инструмент
🔹 как изменится клиентский путь для DS, MLE и Валидаторов
🔹 что станет лучше с переходом на MLStorage
🔹 дальнейшие планы развития
 
Также коллеги проведут DEMO работы с MLStorage и, конечно же, ответят на ваши вопросы!
 
🗓  30 сентября
  12:00
🌐  SberJazz

 
❗️Приглашалку ищите в почте или СберЧате.
 
С уважением,
команда DWH/BigData 💚
🔥2
Друзья, привет!

🗓 На календаре пятница - и в этом посте короткий опрос. Спойлер: таких коротких опросов вы действительно ещё не видели.

До 1 октября мы проводим перепись всех участников комьюнити. Нам хочется узнать о вас больше, чтобы эффективнее настроить наши программы.

Переходите по ссылке и не забывайте нажать кнопку "завершить", чтобы вас точно посчитали😉

👉Пройти опрос👈

С уважением,
команда DWH/BigData
💚
👍4🤩2🔥1
Очный Town Hall SberData состоится уже завтра🚀

Обсудим с CDO блоков DataGovernance by Design, расскажем, как запустить продукт без ресурсов с нуля, покажем, какие обучающие решения у нас есть, и расскажем про наши полезные продукты😎

→ 2 октября
→ с 16:00 до 18:00
→ Большой конференц-зал (2.09)
→ Кутузовский, 32

Задайте любой вопрос для дискуссии на мероприятии по ссылке.

Ждём личной встречи с вами!
👍3👌1
Эксперты DWH/BigData на главных площадках по обсуждению будущего Greenplum в России
 
19 сентября Arenadata провела конференцию «Новое время – новый Greenplum».
 
Дмитрий Добров (SberData) выступил на круглом столе по обсуждению нового ресурса – Greengage.
 
В первых итерациях Greengage будет полностью опираться на то, что уже было выложено в OpenSource, а далее уже будет развиваться собственное решение. Сбер имеет собственную разработку и команду, которая в состоянии как поддерживать текущие решения, так и развивать технологию 


 Развитие Greenplum обсудили также 27 сентября на «T-Meetup». Главный вопрос: будущее Greenplum в России — оно какое?
 
Сейчас появляется несколько параллельных OpenSource решений, построенных на базе Greenplum. Кто из них сможет построить сообщество и выйти в лидеры, вопрос пока открытый. При этом нам необходимо сконцентрироваться на той функциональности, которая нужна Банку и целям развития платформы данных

 
 А вы согласны с таким мнением? Делитесь в комментариях👇
🔥6👍1
Всем привет!
 
Сегодня – понедельник, и мы открываем рабочую неделю знакомством с полезным инструментом для работы с данными.
 
Знаете ли вы, что в Сбере есть реестр повторно используемого кода? Спойлер - конечно, есть!

👉CodeHub👈
 
Забудьте про разработку уникальных решений для типовых задач. Используйте апробированный код ваших коллег! Делитесь своим кодом!
 

Готовы попробовать или уже есть опыт использования? Делитесь в комментариях:)
 
С уважением,
команда DWH/BigData 💚
👍4👎2
Друзья, привет!

⚡️Мы обещали, и мы это сделали! Всем, кому недостаёт зубодробительных технических докладов и свежего data-контента, посвящается

Приходите на очный Data.Meetup от команды DWH/BigData и CedrusData! Мы подготовили насыщенную программу по нескольким направлениям🔥

- Обсудим новые горизонты и практические кейсы работы с Trino — миграция в k8s, особенности работы с Iceberg
- Расскажем, как съели пуд соли с metadata-driven платформой (и почти не подавились)
- Поделимся проверенными сценариями для гарантии поставки и безопасного распространения данных в большой гетерогенной data-платформе
- Поговорим про Flink и расскажем, почему этот движок настолько эффективен

Гостей ждут динамичные доклады, жаркие дискуссии, интерактивы, подарки и, конечно же, вкусное угощение! Переносите тренировки, просмотр сериалов и отложите рабочие задачи — такое нельзя пропустить!

🗓️ 24 октября, четверг
  16:00–20:00 мск
📍Ждем вас очно по адресу: Москва, Кутузовский, 32, к. 1, 2-й этаж, большой конференц-зал
🌐 Будет онлайн-трансляция

👉 ПРОГРАММА 👈

До встречи на Data.Meetup 2024!

С уважением,
Команда DWH/BigData 💚
🔥5👏3
Этот осенний день особенный 🍁
 
Именно сегодня, 11 октября, свой День рождения отмечает Илья Поздняков - настоящий лидер (и не только нашего сообщества), который заряжает энергией и вдохновляет на новые свершения 🎂🎈🎉
 
От всего комьюнити поздравляем Илью с праздником! Пусть всë задуманное реализуется, а рядом всегда будут надёжные люди😉 Крепкого здоровья и благополучия всей семье!
 
Запускаем цепочку поздравлений в комментариях, присоединяйтесь 🎁
🎉21
Знаете ли вы о возможностях LLM app в части восстановления описания данных?
 
Именно об этом рассказали наши коллеги из SberData Сергей Кочетков, Иван Литвин, Борис Давыдов и Иван Муравлев в рамках Data engineering night 16 октября в Т-Банке.
 
В мероприятии приняли участие свыше 200 человек, а одним из самых посещаемых стал стенд Сбера.

👍👍👍 Коллеги поделились наработками в части восстановления описания данных с помощью LLM app: от формулирования эффективных Prompt-запросов до принципов построения и архитектуры приложения, а также провели интересную демо-программу.
 
Благодарим коллег за инициативность и популяризацию продуктов Сбера не только в рамках Банка, но и за его контуром 💚
🔥6
Друзья, привет!
 
Не забывайте, что сегодня в 16:00 вас ждет интереснейший Data.Meetup.
 
👉 Встречаемся очно на Кутузовском пр. 32 к.1, 2 этаж, большой конференц-зал (для сотрудников и тех, кто зарегистрировался по ссылке).
👉 Если вы будете смотреть нас онлайн, подключайтесь по ссылке.
 
Повестка в почте и Друге.
 
Ждем всех🤗
 
С уважением,
команда DWH/BigData 💚
🔥5🥰1
Друзья, наш митап начался. Подключайтесь! 🫶
Друзья, привет!
 
Делимся зарядом энергии и вдохновения и рассказываем полезные новости нашего комьюнити.
 
На habr.com вышла новая статья "Поиск «токсичных» SQL-запросов". Авторы: Даниил Усков и Александр Диков под кураторством Максима Радионова, Дмитриева Игоря и Владимира Зворыгина.
 
Что внутри?
 
- Анализ существующих подходов и их проверка на открытых данных;
- Тестирование моделей на TPC‑H;
- Тестирование моделей на BIRD;
- Описание оригинального подхода к решению задачи.

 
👉 ЧИТАТЬ СТАТЬЮ 👈
 
Поделитесь в комментариях, что вам может пригодиться в работе, о чем хотелось бы узнать в деталях?
 

С уважением,
команда DWH/BigData💚
🔥5
В Рязани на IT Talks by Sber эксперты обсудили Java, QA и, конечно, ML.

🏆 Участники комьюнити Вадим Сурпин и Семен Горохов установили сразу несколько рекордов:

⚪️ Доклад стал ТОП-1 по итогам голосования 
⚪️ Количество вопросов поставило рекорд митапов в Рязани — целых 20!

Покорил слушателей, конечно, доклад Вадима и Семена - опыт работы с GigaChat и другими LLM для создания SQL-запросов, которые возвращают данные на русском языке.

Больше подробностей и презентация - в Друге.

Поздравляем наших экспертов и ждем новых побед 🎉

С уважением,
команда DWH/BigData💚
🔥6👍3