Я – Дата Инженер | Евгений Виндюков
4.34K subscribers
332 photos
32 videos
12 files
229 links
💻 Как войти в IT?
💵 Как стать Data Engineer
🗄 Что такое Big Data и кто ей управляет?
_____________________________
Автор @halltape
Все вопросы по рекламе @k_shredinger
Download Telegram
🧭 Кем быть лучше? DA или DE?

Вообще вопросов можно задать побольше и по острее:

Кто зарабатывает больше? А кем быть проще? А можно ли сменить потом направление? А кто виноват в плохих данных?

Хочу начать с качества данных
На практике конфликтов я пока не встречал (кого я обманываю), но при ошибках в данных, ответственность можно перекладывать, как на первых, так и на вторых. И еще не ясно, кто реально прав.

Может аналитики не дали четкого ТЗ, а дата инженеры сделали, как сами сочли нужным. Или косяк ДЕ, что вовремя не уточнили нюансы и теперь мы сидим с некачественными дашбордами и краснеем.

Вообще проблема коммуникаций между людьми и командами – это всегда актуальная тема. Если вам не охота лишний раз писать, звонить человеку и что-то спрашивать по данным, то потом это может выйти боком.

Как видите, общий навык общения нужен обоим профессиям.

Что касается сложности работы, то рынок очень рандомный. Зарплата не всегда прямо коррелирует с обязанностями, поэтому DA в одной компании может зарабатывать больше DE в другой и наоборот. При этом оба могут писать DAGs в Airflow и это будет норма.

Вопрос остается в том, куда вы хотите сами углубляться и двигаться. Если больше в технику и ближе к DevOps, то это лучше через DE. Если вам интересно более визуальная часть и анализ данных, то это в DA и BI. А дальше уже копать в этом направлении и прокачивать навыки в инструментах.

Если вы не знаете какое направление выбрать, то существует куча каналов с миллиардом полезных материалов (бесплатных).
И вот один из таких - Аналитика данных

А вот топ ссылок с полезными материалами:
🟣Дорожная карта аналитика данных
🟣Статьи по оконным функциям (часть 1 и часть 2)
🟣Исследование требуемых навыков в вакансиях data-специализаций
🟣Мок собесы на аналитиков
🟣Учебный проект по реализации платформы данных с нуля (часть 1, часть 2, часть 3)

Мне кстати еще зашла крутая у него идея с отдельным big data книжным каналом - КАНАЛ С БЕСПЛАТНЫМИ КНИГАМИ
Рекомендую подписаться!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥19👍76
🔴 Го СЕГОДНЯ проведем СТРИМ 22:00 МСК!

23 октября 22:00

Для всех, кто недавно подписался, расскажу, че вас ждет до НГ! Расскажу про Roadmap V2.0 и заодно закинем туда ваши хотелки...

СТРИМ будет 23 октября в 22:00 на полтора часа. Записи не будет, поэтому кто хочет, тот пусть приходит!

Покажу, как выглядит ROADMAP! Кстати, если вы не последний человек в ДЕ, то кто-то из тех, кто будет у вас на собесе, вполне мог бы учиться по этому материалу. Поэтому, если у вас есть конкретные пожелания к будущим джунам-мидлам, можете закинуть свой личный материал (да хоть бусти или менторство). С вас контент, с меня реклама.

Также поболтаем на любые темы, просто познакомимся, навалю вам базы, мотивации и денег
Please open Telegram to view this post
VIEW IN TELEGRAM
👍9🔥62
🔴 Ссылка на СТРИМ

➡️https://www.twitch.tv/halltape

Вопросы и все остальное пишите в комментарии к этому посту! Отсюда я буду читать в прямом эфире.

ВОПРОСЫ И ОБСУЖДЕНИЕ в КОММЕНТАХ!
⬇️⬇️⬇️
Please open Telegram to view this post
VIEW IN TELEGRAM
2👍2🔥1
😈 Спасибо всем за СТРИМ!

Мощно дропнули несколько раз телегу! Теперь даже появился мем. Надо будет придумать парочку угарных)) В следюущий раз дропнем весь интернет!

Может заведем свои стикеры реально или реакции))

И кстати вполне вероятно, что следующий можно попробовать провести на Твиче!

И запомните, мы все должны РАЗНЫМИ СПОСОБАМИ ЗАЛЕТЕТЬ В ЭТО IT!

там в комменты скину файлом фотку для мема)
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥15😁7👍31
💬 СОБИРАЮ МОЩНЕЙШИЙ ROADMAP

Я уже начал собирать Roadmap V2.0 для Data Engineer, где будет отобранная теория + видосы на русском языке (включая мои). Вставляю туда только релевантный материал без ВОДЫ.

Это будет репозиторий на github, поэтому его можно будет всегда обновлять и править.

Основной материал я делаю своими силами, а вот по Airflow, dbt, Kafka, Оптимизация SQL я буду брать у коллег, но с разрешения естественно.

Data Learn умирает. У нас сильно меняется список инструментов с которыми мы работаем, поэтому даже этот roadmap будет актуален первые 3-4 года, если не меньше.

Собственно, я напишу коллегам по DE на разрешение вставки их материала в этот roadmap. А может я вообще зашью туда ссылки на сервис по покупке дешевых авиабилетов и заработаю еще и на рекламе?) Кстати, могу реально зашить ссылки на ваши бусти и платный контент взамен на репост моего роадмапа – бизнес по бартеру...

Помимо всего прочего, я туда вставлю ссылки на ChatGPT, которым пользуюсь лично я. И вполне вероятно, что нужно будет писать отдельно инфу под VPN сервисы. Чувствуется очень актуально!

💰 Короче, я собираю топ инфу, вы идете по ней и потом залетаете на 300к на руки и пьете смузи на берегу океана!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥59👍52
😙 Наш архитектор раздает мощный контент!

Ребят, 7 ноября стартует цикл лекций в Бауманке про оптимизацию SQL запросов!
Читать будет Паша – наш архитектор в Сравни!

➡️ ссылка на лекцию

Я лично собираюсь смотреть, хотя всегда могу подойти лично.
Прям всем рекомендую записаться. По секрету вам скажу, там достаточно серьезные темы и должно быть полезно тем, кто уже умеет писать на SQL.

Хотя если вы новичок, вы всегда можете выключить, когда стало непонятно. Но, не перестаю повторять, прокачивайте свою эрудицию. Сегодня оно вам не пригодится, а вот завтра сыграет в плюс на собесе!

Буду вести конспект для тех, кто не успеет посмотреть!

➡️ ссылка на лекцию

Расписание:
7 ноября
14 ноября
21 ноября
28 ноября
5 декабря


Время:
17:25 - 19:00
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥26👍86
🎯 Воскресный мем
🔥38😁18👍8👎3
‼️‼️‼️ Pycharm ВСЁ?

Поработал я два месяца в Pycharm Pro, где у меня было настроены БД, S3, два проекта на python.

Лицензии начали слетать еще на прошлой неделе у людей. У меня слетела пару минут назад...

Буду переходить на VSCode, DBeaver и CyberDuck (S3). Вот так и меняется мир.

Конечно, ничего страшного не случилось. Адаптируемся под новые реалии. Но меня это крайне бесит. ЗАТЯНУТЬ ПОЯСА, НАДО НЕМНОГО ПОТЕРПЕТЬ)
Please open Telegram to view this post
VIEW IN TELEGRAM
🤯14👍6😱2👎1👏1
Media is too big
VIEW IN TELEGRAM
⛔️ Ты попадешь в ЧЕРНЫЙ СПИСОК!

Слышал я, что многие бояться черных списков, якобы попав туда, вас вычеркнут из МИРА IT навсегда.
Единственный черный список, который нужно избегать – это список людей с уголовными статьями. Вот туда точно лучше не попадать. А в остальном не парьтесь.
Please open Telegram to view this post
VIEW IN TELEGRAM
7🔥3🤔2
This media is not supported in your browser
VIEW IN TELEGRAM
📲 Звонят на предыдущее место работы?

А что если позвонят на предыдущее место работы и спросят про меня?
Ну дайте номер друга или кореша, если нет желания рассказывать все про себя. Или вообще не делитесь этим контактом. Да и я бы скипал таких людей, кто хотел бы что-то спросить про моего коллегу, либо скажу, что он(а) супер молорик..

или может сказать, что он умер) ахахаха
Please open Telegram to view this post
VIEW IN TELEGRAM
🤔1
🔥 Сколько мы зарабатываем?

Рубль обесценивается, инфляция растет. Завтра вы беднее, чем сегодня, поэтому по идее зарплата должна повышаться пропорционально. Но естественное это так не работает. Но по крайней мере наша задача не продешевить на собесе и попросить столько денег, чтобы хватило и на черную икру и на майбах, а не только на икру.

Вот заметил канал с конкретными зарплатными вилками. Думаю, что кто-то из вас уже видел. Но вообще рекомендую подписаться и следить. Вдруг вы просите очень мало или наоборот много. По крайней мере инфа актуальна.

ПОДПИСЫВАЙСЯ

Ну я слежу за каналом) скоро там будут еще и валютные вакансии.. поэтому чекаем)
Please open Telegram to view this post
VIEW IN TELEGRAM
👍6🔥51
Media is too big
VIEW IN TELEGRAM
Не крутил, не вкатывался в IT

Любимая тема накрутки опыта. Напишите 10-11 месяцев опыта работа – попадете в авто отказ.
Я рекомендую докручивать до года. Хотя крутите как хотите.. Вам нужна работа или нет?

Короче, не вижу смысла ждать, когда кол-во опыта совпадет с нужным. Чувствуете, что хотите на вакансию, пишите под нее опыт и откликаетесь. Может ваших знаний как раз и будет хватать. А так бы вы сидели и ждали..

Все решает собес или тестовые задания. Хотя, если вы мидл и выше, то скорее всего тестовые вы смело скипаете, потому что предложений сыпется и так много. Хотя и сам собес может состоять из ТОП 100 вопросов дата инженеру из Гугла. Тогда это точно ничего не решает)

Нет откликов, добавляйте опыта в резюме. Че вам еще сказать.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍235👎4🤔3
Media is too big
VIEW IN TELEGRAM
🖼️ Нужна ли фотка в резюме? А если у меня две головы?

Тут я полностью согласен с HR. Хотя фотка не влияет на умение писать код, но разбирают ваши резюме все таки чаще рекрутеры. Играйте по их правилам. Это они решают, взять вас на собес или нет. Бороться с этим бесполезно. Просто надо принять.

Ну и в целом это все таки ваша визитная карточка, а не оторванный кусок от газеты. На российском рынке сейчас такие правила. Если вы несогласны, можете попытать удачу на зарубежном рынке. Там, насколько я знаю, фотка может быть даже излишне (чтобы быть более объективным при выборе между очкастым ботаником и горячей моделью).
Please open Telegram to view this post
VIEW IN TELEGRAM
👍51👎1🔥1
Как научиться извлекать максимальную пользу из данных?

Приходите на курс "Основы Data Governance" с Александром Бараковым от BI Consult и получите актуальные навыки в трендовой теме управления данными! Data Governance позволит вам навести порядок в данных, ускорить разработку в ИТ-системах, повысить надежность и качество данных, аналитики и отчетности.

📆Даты: 4-13 декабря 2024 года.

Формат курса: 5 встреч по 3 часа интенсива в онлайн формате для CDO, CIO, Data stewards, BI-менеджеров, Операционных директоров и всех кому тема близка.

Автор курса: Александр Бараков - эксперт с 10-летним опытом ведения Data Governance проектов.

Курс позволит сформировать глубокое понимание темы Data Governance и 'примерить' все это на бизнес реалии вашей организации. По итогам курса у каждого слушателя будет сформирована готовая стратегия по внедрению Data Governance в свою компанию и понимание того, как настроить управление данными в любом бизнесе.

🗂На курсе мы погрузимся в темы:

• Information Management (IM)
• Data Quality (DQ)
• Data Governance (DG) (основные элементы, технологии и практики)
• Master Data Management (MDM)
• Управление и оценка эффективности DG

Каждый участник будет заполнять excel-гайд своего проекта Data Governance, применяя разделы курса на контекст своей компании.

📌Почему стоит выбрать этот курс?

Сильная база: Вы поймете почему данные - это важно, в чем их реальная ценность и как 'продавать' проект менеджменту.
Практическая направленность: Курс включает реальные кейсы и задачи из бизнеса.
Нетворкинг: Участвуйте в активном обмене опытом с другими участниками курса и расширьте свою профессиональную сеть. На нашем курсе обучаются CDO и CIO таких компаний, как Максидом, Сбербанк, ВК, Sunlight и KFC.

🔝Записаться на курс
👍61🔥1
🔴 ГО СЕГОДНЯ СТРИМ в 21:00!

Чет я устал за эту неделю. Надо развлечься...
Сегодня на стриме поговорим на свободные темы + почекаем резюме с hh DE.

Плюс расскажу вам, какие задачи реально бывают сложными и непонятно-как-решаемыми. Ну и по отвечаю на ваши вопросы..

Расскажу также, на какой стадии Спарк и Роадмап. Там конечно мощнейший контент после которого у вас не должно остаться вопросов.

Ставьте 🔥 кто придет на стрим!

ссылка на трансляцию будет в 21 00. Там же можно будет писать комменты
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥38👍5👏2
🔴 Ссылка на СТРИМ

➡️https://www.twitch.tv/halltape

Вопросы и все остальное пишите в комментарии к этому посту! Отсюда я буду читать в прямом эфире.

ВОПРОСЫ И ОБСУЖДЕНИЕ в КОММЕНТАХ!
⬇️⬇️⬇️
Please open Telegram to view this post
VIEW IN TELEGRAM
3🔥2👍1
👨‍💻 Воскресный мем!

Как войти в завод?
Please open Telegram to view this post
VIEW IN TELEGRAM
😁20🔥2
Что такое GreenPlum?

Для вас сделал видео, в котором будет идти речь об архитектуре, дистрибуции, партицировании и отказоустойчивости GreenPlum. Также расскажу об индексах и поверхностно зацепим оптимизацию запросов.

Всё что нужно для успешного прохождения собеседования👍

😘Ссылка на видео.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥35👏54👍3