SberProfi DWH/BigData
1.06K subscribers
324 photos
9 videos
362 links
Telegram-канал SberProfi DWH/BigData 💚
Наш чат: https://t.iss.one/+6Vc_rNMJl8MzYzcy
Наша миссия: развивать компетенции по технологиям работы с данными, например, такими, как экосистема Hadoop, Teradata, Oracle DB, GreenPlum и др.
Download Telegram
Коллеги, привет! 🌈
 
Уже завтра состоится 58 митап DWH/BigData!
 
💥 Повестка: 

1. Маркелов М., Васильев П. (SberData): Дашборд трактов для бизнеса
2. Смирнов С. (Департамент данных и общих сервисов ИТ B2C): Гарантии доставки сообщений. Введение на примере фреймворка apache flink
3. Грибанова А., Зворыгин В. (SberData): AI DataChat - помощник, который говорит с тобой на одном языке
 
Вас ждут 1,5 часа ценной теории и практики, пропустить нельзя 🔥

🗓  21 августа, среда
  12:30-14:00
🌐  SberJazz

👉 Подключиться 👈

До встречи на митапе!

С уважением,
команда DWH/BigData 💚
🔥6
Друзья, привет!
 
Мы продолжаем серию материалов по миграции крупного аналитического хранилища данных из одной СУБД в другую. 👇

Сегодня наши коллеги из SberData опубликовали на Habr аналитический материал о процессе переноса архива данных объемом более 400 Тб из Teradata в GreenPlum с использованием Hadoop и PXF.

Авторы - Николай Абрамов, Евгений Видман и Елена Свиридова - рассказали про архитектуру решения, основные трудности, связанные с объемами данных и скоростью передачи, а также тесты производительности.
 
🔥 Ожидания авторов оправдались – команда успешно выполнила миграцию с минимальным влиянием на работу хранилища.

Ознакомиться с полным текстом статьи можно здесь.

Читайте, ставьте лайки и комментируйте - статья получилась действительно интересная😎

P.S. Если у вас тоже есть желание опубликовать материал на Habr и других ресурсах, обязательно пишите нашему КМ Валерии Смахтиной.
 
С уважением,
команда DWH/BigData 💚
👍3👏3
Друзья, привет!

Ну как, вы уже успели влиться в рабочий процесс после сезона отпусков? Если да, то у нас для вас отличная новость 😎 Приглашаем на митап Сообщества 🔥

Повестка:
- Андрей Степанов (SberData), Алексей Евсюгин (Департамент данных и рекомендательных систем B2C): Запуск инференса модели на GPU при помощи ПИМ
- Андрей Емельянов, Андрей Ветров, Руслан Мурадымов (SberData): Time series CookBook
- Максим Радионов, Владимир Зворыгин (SberData): Опыт участия в хакатоне «Внедряй AI»

🗓 17 сентября, вторник
15:00-16:30
🌐 SberJazz

💌Приглашалку ищите в почте:)

С уважением,
команда DWH/BigData 💚
🔥21
Новая порция полезных материалов от участников Сообщества DWH/BigData 😎

О своем опыте и хранении данных в PostgreSQL на физическом уровне рассказал Владислав Гришин (Отдел экспертной поддержки технологий, г. Екатеринбург).

Новая статья - уже на сайте habr.com! Кликайте по ссылке для чтения, лайков и комментариев:

👉ХРАНЕНИЕ ДАННЫХ В POSTGRESQL👈

P.S. Хотите поделиться своими новостями, подборками или опубликовать статью? Не стесняйтесь и обязательно напишите нашему КМ Валерии Смахтиной.

С уважением,
команда DWH/BigData💚
👍2🎉1
Ни одного митапа без DWH/BigData

В нашем Сообществе десятки и сотни команд каждый день разрабатывают и развивают внешние и внутренние продукты, обсуждают функционал, фичи и идеи. И, конечно, всегда готовы делиться опытом😊

11 сентября эксперты DWH/BigData Александр Стрелков и Сергей Лебедев приняли участие в масштабном мероприятии «Arch.Meetup by Sber: современное управление архитектурой данных».

Организаторами выступили наши коллеги и друзья из Architecture Community💚

Более 250 человек познакомились с продуктами SberData на стендах Sber Innovations:

👉🏻 Александр Стрелков приехал из Санкт-Петербурга, чтобы лично представить SDP Beholder – сервис мониторинга и управления нагрузкой на кластерах Greenplum

👉🏻 Сергей Лебедев представил средство маркирования данных Sber Data Guard

Судя по количеству вопросов к нашим стендистам и активному обмену визитками, продукты точно вызвали интерес 😉 

А как насчет повторить опыт со стендами? Ставьте реакции, если ждёте ОЧНОЕ мероприятие в сообществе DWH/BigData 🔥
🔥61👍1
Более 150 участников, 3 доклада и 7 спикеров - все это 59-й митап DWH/BigData
 
Собрали для вас основные новости мероприятия👌

🔹Доказали практическую возможность запуска ПИМ на GPU
🔹Обсудили технологию аналитики с временными рядами, как простыми, так и многомерными
🔹Узнали, как GigaChat сокращает время найма IT-сотрудников на 50% и кто такой AI-рекрутер
🔹Получили заряд энергии и мотивации
 
Свежий Data-контент представили:

- Андрей Степанов (SberData), Алексей Евсюгин (Департамент данных и рекомендательных систем B2C)
- Андрей Емельянов, Андрей Ветров, Руслан Мурадымов (SberData)
- Максим Радионов, Владимир Зворыгин (SberData)
 

Запись митапа вы найдете в СберВидео, а материалы встречи можно посмотреть в Друге и на странице в Confluence.
 
Если вы были с нами, поделитесь впечатлениями в комментариях под этим постом ☀️
 

С уважением,
команда DWH/BigData 💚
👍4
Друзья, привет!
 
Знаете ли вы, что в 2025 году планируется переход на MLStorage, который заменит Bitbucket и Nexus в части хранения артефактов моделирования?🧐
 
Приглашаем обсудить новый инструмент для хранения моделей на митапе!
 
👥 Эксперты встречи: Юлия Ступак, Сергей Иванов, Владимир Медин
 
На примере кейсов и опыта мы обсудим:
 
🔹 для решения каких задач предназначен новый инструмент
🔹 как изменится клиентский путь для DS, MLE и Валидаторов
🔹 что станет лучше с переходом на MLStorage
🔹 дальнейшие планы развития
 
Также коллеги проведут DEMO работы с MLStorage и, конечно же, ответят на ваши вопросы!
 
🗓  30 сентября
  12:00
🌐  SberJazz

 
❗️Приглашалку ищите в почте или СберЧате.
 
С уважением,
команда DWH/BigData 💚
🔥2
Друзья, привет!

🗓 На календаре пятница - и в этом посте короткий опрос. Спойлер: таких коротких опросов вы действительно ещё не видели.

До 1 октября мы проводим перепись всех участников комьюнити. Нам хочется узнать о вас больше, чтобы эффективнее настроить наши программы.

Переходите по ссылке и не забывайте нажать кнопку "завершить", чтобы вас точно посчитали😉

👉Пройти опрос👈

С уважением,
команда DWH/BigData
💚
👍4🤩2🔥1
Очный Town Hall SberData состоится уже завтра🚀

Обсудим с CDO блоков DataGovernance by Design, расскажем, как запустить продукт без ресурсов с нуля, покажем, какие обучающие решения у нас есть, и расскажем про наши полезные продукты😎

→ 2 октября
→ с 16:00 до 18:00
→ Большой конференц-зал (2.09)
→ Кутузовский, 32

Задайте любой вопрос для дискуссии на мероприятии по ссылке.

Ждём личной встречи с вами!
👍3👌1
Эксперты DWH/BigData на главных площадках по обсуждению будущего Greenplum в России
 
19 сентября Arenadata провела конференцию «Новое время – новый Greenplum».
 
Дмитрий Добров (SberData) выступил на круглом столе по обсуждению нового ресурса – Greengage.
 
В первых итерациях Greengage будет полностью опираться на то, что уже было выложено в OpenSource, а далее уже будет развиваться собственное решение. Сбер имеет собственную разработку и команду, которая в состоянии как поддерживать текущие решения, так и развивать технологию 


 Развитие Greenplum обсудили также 27 сентября на «T-Meetup». Главный вопрос: будущее Greenplum в России — оно какое?
 
Сейчас появляется несколько параллельных OpenSource решений, построенных на базе Greenplum. Кто из них сможет построить сообщество и выйти в лидеры, вопрос пока открытый. При этом нам необходимо сконцентрироваться на той функциональности, которая нужна Банку и целям развития платформы данных

 
 А вы согласны с таким мнением? Делитесь в комментариях👇
🔥6👍1
Всем привет!
 
Сегодня – понедельник, и мы открываем рабочую неделю знакомством с полезным инструментом для работы с данными.
 
Знаете ли вы, что в Сбере есть реестр повторно используемого кода? Спойлер - конечно, есть!

👉CodeHub👈
 
Забудьте про разработку уникальных решений для типовых задач. Используйте апробированный код ваших коллег! Делитесь своим кодом!
 

Готовы попробовать или уже есть опыт использования? Делитесь в комментариях:)
 
С уважением,
команда DWH/BigData 💚
👍4👎2