Data & IT Career

dbt: 2024 State of Analytics Engineering

#DBT опубликовали отчёт о состоянии analytics engineering за 2024 год.

Низкое качество данных и неясное владение ими остаются главными проблемами для дата команд.

Data Mesh постоянно набирает популярность среди enterprise компаний. Это резкое отличие от отчета #Gartner о data mesh.

И ещё вебинар сегодня будет (вроде только через корп-почту рега)

#Саммари от 300.ya.ru:
Состояние аналитической инженерии на 2024 год | dbt Labs
• В отчете представлены результаты опроса специалистов по обработке данных.
• Инженеры-аналитики получают значительно больший заработок, чем аналитики данных.
• Специалисты по обработке данных выполняют широкий спектр обязанностей и задач.
• Основные проблемы, с которыми сталкиваются группы обработки данных, включают низкое качество данных и неясное владение данными.
• Повышение информационной грамотности заинтересованных сторон считается важным для групп обработки данных.
• Большинство специалистов по обработке данных считают, что у них есть опыт в проведении преобразований данных.
• Неколичественные цели являются основным показателем успеха для групп обработки данных.
• Многие команды сообщают о сокращении бюджета и/или численности персонала, но большинство планируют сохранить инвестиции в инструменты обработки данных.
• Децентрализованные архитектуры обработки данных, такие как data mesh, привлекают внимание компаний разного размера.
• Растет тенденция к внедрению искусственного интеллекта среди специалистов по обработке данных.

💡Годы идут, а проблемы, задачи и тенденции всё те же +-! 🤣

источник: https://t.iss.one/dataexplorers/250 #DataMesh #report #y2024 #theStateOf #AE

Please open Telegram to view this post

VIEW IN TELEGRAM

Please open Telegram to view this post

VIEW IN TELEGRAM

429 viewsНиколай Крупий, 15:07

Data & IT Career

И 2й, пока что тоже почти непререкаемый король ETL - #dbt! 👑

На «Апрельском бигдатнике sql-ninja» будет много по него. В тч от самого известного мне эксперта по нему со своим тг-каналом - Артемия Козыря.

https://t.iss.one/data_apps/383

Please open Telegram to view this post

VIEW IN TELEGRAM

Data Apps Design

Доклады на Апрельском бигдатнике sql-ninja (Москва, 27.04)

Я готовлю practice-oriented доклад 🔺 SQL + dbt = God Mode Data Modeling

☕️ Буду доступен для живого общения и нетворкинга:

— Мнения насчет Snowflake, dbt, Looker, Cube и других
— Консалтинг в сфере…

⚡2

230 viewsНиколай Крупий, edited 08:20

Data & IT Career

И 2й, пока что тоже почти непререкаемый король ETL - #dbt! 👑 На «Апрельском бигдатнике sql-ninja» будет много по него. В тч от самого известного мне эксперта по нему со своим тг-каналом - Артемия Козыря. https://t.iss.one/data_apps/383

https://t.iss.one/data_events/2946
#meetup
#dbt+#airflow

Data Events

Организаторы, отвергнув прочие коммерческие схемы, предложили анонс ивента за розыгрыш двух билетов для подписчиков, так что если придумаете, как сиё устроить – пишите под пост – огранизуем! 😁😁
https://t.iss.one/sql_ninja_news/27

Коллеги, приглашаем вас на самую…

315 viewsНиколай Крупий, edited 08:22

Data & IT Career

Новый #MDS идёт семимильными шагами!..
- https://t.iss.one/dbt_users/28593
- но и старички дают отпор 😁 ("dbt купил SDF..." – слышали, наверное, вот, например: https://t.iss.one/alexseconds/272 )

#sqlmesh+#Dagster vs #dbt+#SDF => ...? 🍿

Please open Telegram to view this post

VIEW IN TELEGRAM

Дмитрий Володин in dbt & modern data stack

Что это они там строят, интересно?

241 viewsedited 07:30

Data & IT Career

Обсуждаем хорош ли #dbt под #ClickHouse (или наоборот)
- #приходите! 😁

https://t.iss.one/dbt_users/28727?thread=28715

Please open Telegram to view this post

VIEW IN TELEGRAM

Freaking Mind in dbt & modern data stack

Я закину как-нибудь как в кучу соберу, но в кратце это почти везде писать кастомные материализации т.к.

1. Он делает create as select - ddl, которая может зависнуть и придется перезагружать сервак (по другому запрос не убивается)
2. С большей вероятностью…

1.42K viewsedited 18:16

Data & IT Career

Что лучше: тумбочка или алебастр?.. 🤔

https://t.iss.one/DataEngineering_ru/568

Please open Telegram to view this post

VIEW IN TELEGRAM

Data Engineering / reposts & drafts

#Trino #dbt #Сходства #отличия
Trino vs dbt: что и когда использовать

Что общего между Trino и dbt, чем они отличаются и в каких случаях выбирать тот или иной инструмент для инженерии и анализа данных. Краткий ликбез для начинающего дата-инженера и аналитика.…

🤣4😁2

312 viewsedited 07:33

Ладно, вот вам что-то полезненькое (уж не без ссылок, сорян! 😅)

#Ваня там штапмует топовый контент в рамках прохождения #DEZoomcamp2025!
- я, чесгря, видосы не смотрел толком!
- да и до курса руки не доходят пока
- но репы поглядываю мельком – там прям интересно 🤓😁 (подкините стикеров новых, кстати плз! 😅)

https://t.iss.one/dezoomcampru2025/216/423

Всем привет 👋
подготовил репо с dagster dlt dbt
и записал небольшое видео, будут вопросы пишите

https://github.com/vndv/dagster-dlt

#dagster #dlt #dbt #ModernDataStack #MDS

Please open Telegram to view this post

VIEW IN TELEGRAM

268 viewsedited 19:44

Data & IT Career

Что просим у гуру нашего, Артемия? 😁
https://t.iss.one/data_apps/426
#devcontainers #GithiubActions #Cursor #dbt #kzzzr #Артемий

Please open Telegram to view this post

VIEW IN TELEGRAM

Data Apps Design

В общем, если вы еще не пользуетесь Development Containers, Github Actions, dbt, Cursor то я настоятельно вам советую попробовать.

😘 А если будет интерес, то могу и провести YouTube stream / tutorial со слайдами и демо (как мы любим).

Всем успехов. Делитесь…

549 viewsedited 16:19

Data & IT Career

🚀 DBT документация теперь на русском!

#Кстати! Хочу порекомендовать полезный бесплатный проект по #dbt, а именно перевод всей доки dbt на русский язык - https://docs.getdbt.tech

🔥

❤️‍🔥

Чем будет полезно?

- для новичков, интересующихся dbt, на портале доступны пошаговые гайды, как начать работу с выбранным хранилищем данных и создать первые этапы пайпайна за 15 минут
- для тех, кто уже обрабатывает данные с dbt, сайт станет постоянным компаньоном, потому что там полностью переведены все разделы документации, включая справочник команд и статьи из блогов
- для тех, кто хочет перейти с dbt на следующий уровень, переведен раздел с лучшими практиками

Please open Telegram to view this post

VIEW IN TELEGRAM

🔥11👍4⚡2❤2

1.03K viewsedited 16:26

Data & IT Career

Forwarded from Data Events

https://t.iss.one/DE_events/1244

Data engineering events

#DBT MEETUP
📅27 марта в 19:00 (+3 GMT)
📍 Формат: онлайн, участие бесплатное.
Обсуждение современных практик локальной разработки и тестирования в dbt.

• Спикеры:

🗣️Андрей Гаврилов Senior Инженер по прокладыванию дата-труб
Тема: Современные практики локальной…

🤔3

737 views16:06

Data & IT Career

Что-то не наблюдаемо нативной интеграции #dbt*... обещали ж где-то вроде... 🤔 Но всё равно – надо смотреть! Пч #Airflow ещё более вездесущ чем ГП! 😁
- https://t.iss.one/DE_events/1248

* так всё таки, что лучше?
- Bash/Docker/KubernetesOperator("dbt run")
- #Cosmos
- #dbt_af
- или другое?)

_________
У кого нет корп почты для реги – пишите под пост запрос +
- либо ответ с комментариями на вопрос отсюда
- или сюда под пост коммент https://t.iss.one/data_career/2039
- или тут https://t.iss.one/data_career/2037
- либо лайк этого поста + репост в др чатик 😁
- либо... 🤔
За то кину в личку прямую ссылку на регу на онлайн ;)

Please open Telegram to view this post

VIEW IN TELEGRAM

⚡3

386 viewsedited 08:13

Data & IT Career

⚠️ Кстати, а вы знали? - #DBT забанила #SQLMesh для выступлению на конференции #Coalesce в Вегасе 😱

Об этом и не только см в новом эксклюзивном посте

#SQLMesh #dltHub и простой советский…

Please open Telegram to view this post

VIEW IN TELEGRAM

388 viewsedited 14:24

About

Blog

Apps

Platform