Если кто еще не видел
Добавили сразу несколько новых разделов:
🧩 Junior
🚀 Junior+ и выше
И не забудьте заглянуть в наш раздел по Kafka!
Это ультимативный гайд по Data Engineering:
🔹 лучшие материалы
🔹 по уровням
🔹 абсолютно бесплатно
Пользуйтесь, пересылайте друзьям, делитесь с коллегами!
📬 Кстати!
Если Roadmap вам помог, напишите отзыв — это супер важно:
можно анонимно или с ником
👉 https://t.iss.one/anonim_mail_bot?start=310679195
⸻
👥 А если не хотите учиться в одиночку, у нас для вас новости:
📦 BootCamp — настоящий симулятор дата-инженера.
Уже стартовал первый поток! Заходи в наш чат
🤝 Роадмаперы — место, где можно проходить Roadmap вместе с другими: обсуждать, делиться прогрессом, не сдаваться. Плюс каждую неделю созвоны. Отличная возомжность задать вопросы или поделиться болью)
В Роадмаперы можно будет залететь уже на следующей неделе. Следите за новостями!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥39❤14👍8
Удобно ли вам пользоваться Roadmap?
Например заходите на гитхаб, листаете вниз, а чтобы вернуться в оглавление, надо опять листать, но уже наверх. Может удобнее было бы иметь меню слева?
Например, как у Аренадаты сделано
Т.е. сделать конкретный сайт с одной ссылкой, где будет наш Roadmap + ссылки на BootCamp + отзывы о нас + ссылки на вакансии (мы хотим заколабиться с HR).
Короче, сейчас наш Роадмап на github это единая точка.
И мы просто сделаем это красИвее и удобнее.
Роадмап это уже не один или два автора – это агрегатор нескольких авторов и он уже вышел за пределы джунов. Серебряная пуля!
Please open Telegram to view this post
VIEW IN TELEGRAM
GitHub
GitHub - halltape/HalltapeRoadmapDE: Roadmap для Data Engineer. Цель роадмапа – устроиться тебе на работу!
Roadmap для Data Engineer. Цель роадмапа – устроиться тебе на работу! - halltape/HalltapeRoadmapDE
🔥39👍7👏2
❓Как правильно проектировать и развивать хранилище данных (DWH), чтобы оно отвечало бизнес-задачам компании?
Приходи на авторский курс Руководство по DWH: Архитектура, Инструменты, Внедрение
📆 Дата: 21 июля – 1 августа 2025 г.
📍Формат: онлайн с ведущим экспертом. 32 ак.часа практического интенсива.
💲Стоимость: 93 000 р. (поможем оформить обучение от компании).
📌 Для тех, кто хочет говорить на одном языке с бизнесом и IT, определять необходимость внедрения DWH и его ценность для бизнеса.
📚Вы научитесь:
⏩Разбираться в архитектурных подходах к созданию DWH и понимать их эволюцию.
⏩ Выбирать правильную архитектуру в зависимости от задач компании.
⏩ Работать с современными инструментами и концепциями, такими как Data Mesh, Data Lakehouse, Apache Iceberg, Trino, dbt.
💡 В результате вы сможете участвовать в проектах по разработке и оптимизации DWH с учетом актуальных практик.
⚠️Также, если вы хотите освоить ключевые навыки, необходимые для установки, настройки и поддержки аналитической СУБД ClickHouse, ждем Вас на курсах:
Запросы в Clickhouse
📆 Даты: 21 – 23 июля 2025 г.
Разработка и поддержка в Clickhouse
📆 Даты: 28 – 30 июля 2025 г.
👉 оставляй заявку , расскажем, как будет организовано твое обучение.
Приходи на авторский курс Руководство по DWH: Архитектура, Инструменты, Внедрение
📆 Дата: 21 июля – 1 августа 2025 г.
📍Формат: онлайн с ведущим экспертом. 32 ак.часа практического интенсива.
💲Стоимость: 93 000 р. (поможем оформить обучение от компании).
📌 Для тех, кто хочет говорить на одном языке с бизнесом и IT, определять необходимость внедрения DWH и его ценность для бизнеса.
📚Вы научитесь:
⏩Разбираться в архитектурных подходах к созданию DWH и понимать их эволюцию.
⏩ Выбирать правильную архитектуру в зависимости от задач компании.
⏩ Работать с современными инструментами и концепциями, такими как Data Mesh, Data Lakehouse, Apache Iceberg, Trino, dbt.
💡 В результате вы сможете участвовать в проектах по разработке и оптимизации DWH с учетом актуальных практик.
⚠️Также, если вы хотите освоить ключевые навыки, необходимые для установки, настройки и поддержки аналитической СУБД ClickHouse, ждем Вас на курсах:
Запросы в Clickhouse
📆 Даты: 21 – 23 июля 2025 г.
Разработка и поддержка в Clickhouse
📆 Даты: 28 – 30 июля 2025 г.
👉 оставляй заявку , расскажем, как будет организовано твое обучение.
😱14😁5👍3🤯2❤1
Работу ДЕ почти не найти? 🤔
Да, если ты не понимаешь запросы компаний
В этой статье разбор рынка от Техлида, который активно нанимает дата инженеров📊
Он простым и понятным языком ответил на вопросы:
- Что происходит с наймом?
- Какие сейчас вилки у ДЕ?💸
- Что изучать, чтобы через 3 месяца получить оффер?
Все основано на фактах и личном опыте автора
Она доступна в закрепе его канала "Данные не врут"
👇 Если хочешь найти работу за ближайшие 3 месяца...
—> ЧИТАТЬ <—
Да, если ты не понимаешь запросы компаний
В этой статье разбор рынка от Техлида, который активно нанимает дата инженеров
Он простым и понятным языком ответил на вопросы:
- Что происходит с наймом?
- Какие сейчас вилки у ДЕ?
- Что изучать, чтобы через 3 месяца получить оффер?
Все основано на фактах и личном опыте автора
Она доступна в закрепе его канала "Данные не врут"
—> ЧИТАТЬ <—
Please open Telegram to view this post
VIEW IN TELEGRAM
😁11❤9🔥3👍1🤔1
Вот мы с Володей много раз ходили и ходим на собесы и часто их записываем на видео. Их накапливается достаточное кол-во, поэтому теперь их можно посмотреть в нашем Bossty Роадмаперы!
Это вообще отличная возможность посмотреть, как например я жестко туплю в задачах. На мой взгляд у меня слабый python. Можно половить испанский стыд и понять, как делать НЕ НАДО!
Но по части самопрезентации, я считаю, что у меня все оч даже неплохо. Плюс есть запись собеса по System Design. Очень рекомендую посмотреть на досуге. Некоторые фишки я брал у Валерия Бабушкина - ПРИГОДИЛИСЬ!
Короче контент реально клевый, честный и настоящий. По деньгам там везде написано к каждой вакансии, поэтому можете прикинуть на какой оффер можете претендовать. И еще. Я бы на вашем месте запоминал некоторые паттерны рассказа о себе и применял их У СЕБЯ.
Что вообще дает подписка:
Стоимость подписки до 10 июля будет 500 рублей. Кто успеет подписаться, тот останется на этой сумме навсегда.
После 10 июля станет 1000 рублей.
Bossty Роадмаперы!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥25👍4❤3🤔1
Как найти работу за рубежом, если страшно и непонятно с чего начать?
Международный рынок открывает двери к крутым проектам, зарплатам в долларах и евро, но искать работу за границей долго, нудно и слишком сложно!
А самое главное, вообще непонятно, что делать. Правила рынка совсем другие. Здесь мало резюмешки на хэдхантере и рекрутеры за тобой не бегают толпами. Зато нужно заводить LinkedIn, искать рефералы, выискивать вакансии среди десятков джоб-бордов...
Разобраться самому почти невозможно. Зато есть такие ребята как AgileFluent 👇
Они уже 4 года помогают IT и Digital специалистам выйти на международный рынок. На их счету — 350+ офферов в 22 странах в такие компании как Amazon, Cisco, UniCredit, Revolut, FLO, Ferrero, N26, ALDI, Semrush, Wheely…
Они ведут крутой канал про международку, где делятся:
✔️ историями тех, кто переехал и зарабатывает в валюте,
✔️ разборами резюме и LinkedIn профилей,
✔️ персональными подборками вакансий,
✔️ гайдами и чек-листами по CV, CL, LinkedIn...
Если давно мечтал о работе за рубежом — это твой знак! Начни с их канала :)
👉 Подписывайся
Реклама. ООО «Эджайл», ИНН 7810964334, erid: 2Vtzqw2Rezb
Международный рынок открывает двери к крутым проектам, зарплатам в долларах и евро, но искать работу за границей долго, нудно и слишком сложно!
А самое главное, вообще непонятно, что делать. Правила рынка совсем другие. Здесь мало резюмешки на хэдхантере и рекрутеры за тобой не бегают толпами. Зато нужно заводить LinkedIn, искать рефералы, выискивать вакансии среди десятков джоб-бордов...
Разобраться самому почти невозможно. Зато есть такие ребята как AgileFluent 👇
Они уже 4 года помогают IT и Digital специалистам выйти на международный рынок. На их счету — 350+ офферов в 22 странах в такие компании как Amazon, Cisco, UniCredit, Revolut, FLO, Ferrero, N26, ALDI, Semrush, Wheely…
Они ведут крутой канал про международку, где делятся:
✔️ историями тех, кто переехал и зарабатывает в валюте,
✔️ разборами резюме и LinkedIn профилей,
✔️ персональными подборками вакансий,
✔️ гайдами и чек-листами по CV, CL, LinkedIn...
Если давно мечтал о работе за рубежом — это твой знак! Начни с их канала :)
👉 Подписывайся
Реклама. ООО «Эджайл», ИНН 7810964334, erid: 2Vtzqw2Rezb
Telegram
AgileFluent: карьера без границ
Ответим на все вопросы на консультации: https://link.agilefluent.ru/7kx
Помогаем IT и Digital специалистам найти работу на глобальном рынке:
— сопровождаем до оффера;
— 500+ офферов в 26 странах;
— CV, CL, LinkedIn;
— курсы по бизнес-английскому.
Помогаем IT и Digital специалистам найти работу на глобальном рынке:
— сопровождаем до оффера;
— 500+ офферов в 26 странах;
— CV, CL, LinkedIn;
— курсы по бизнес-английскому.
🔥7❤3👏2😁2
Когда уже ИИ нас заменит?
Я говорю это с надеждой, а не со страхом. И вот почему:
Половину буткемпа написано с chatGPT, но я потратил на это целый месяц, чтобы все отладить. Потом еще найти слабые места в потреблении ресурсов. Еще куча времени ушло на настройку лимитов, настройку авторизации, дебаг телеграм бота и прочего.
Я каждый день часами сидел перед компом и писал код. Где тот самый ИИ, который за день бы мне все развернул, настроил железо, мониторинг и так далее.
Огромная часть проблема связана не с кодом, а с архитектурными решениями. К сожалению, ИИ пока не видит контекст вне файла с кодом. Мне нужно, чтобы он видел мою сеть и сервисы, которые там развернуты. Ведь именно там и кроется большая часть проблем.
Ошибки в коде фиксились раньше через гугл и stack overflow. Ну теперь мы просто ходим в чат. Ок. А че делать с проблемой нехватки ресурсов или недоступности сети..
Вот например мне надо, чтобы ИИ мог увидеть авторизацию пользователя внутри сервиса и потом сходить сам в Базу Данных и проверить, правильно ли записались данные. Но нет. Это делаю я.
Тоже самое и на работе. Если у меня падает код, то это возможно из-за недоступности сервиса или отсутствия данных. Писать код это удобно.. но недостаточно.
И собственно самое главное. Что будет дальше? Я думаю, что рано или поздно его настроят, чтобы он мог ходить по сети и обрабатывать весь архитектурный контекст. Мы тогда начнем выполнять более абстрактные задачи и более масштабные. Тогда вместо 100 программистов, пишущих одно приложение, будет 100 программистов, пишущих 100 приложений.
Ну или 100 безработных программистов, устроившихся на завод! Наконец-то! А то сколько можно уже столько зарабатывать!
Задать вопрос анонимно
Я говорю это с надеждой, а не со страхом. И вот почему:
Половину буткемпа написано с chatGPT, но я потратил на это целый месяц, чтобы все отладить. Потом еще найти слабые места в потреблении ресурсов. Еще куча времени ушло на настройку лимитов, настройку авторизации, дебаг телеграм бота и прочего.
Я каждый день часами сидел перед компом и писал код. Где тот самый ИИ, который за день бы мне все развернул, настроил железо, мониторинг и так далее.
Огромная часть проблема связана не с кодом, а с архитектурными решениями. К сожалению, ИИ пока не видит контекст вне файла с кодом. Мне нужно, чтобы он видел мою сеть и сервисы, которые там развернуты. Ведь именно там и кроется большая часть проблем.
Ошибки в коде фиксились раньше через гугл и stack overflow. Ну теперь мы просто ходим в чат. Ок. А че делать с проблемой нехватки ресурсов или недоступности сети..
Вот например мне надо, чтобы ИИ мог увидеть авторизацию пользователя внутри сервиса и потом сходить сам в Базу Данных и проверить, правильно ли записались данные. Но нет. Это делаю я.
Тоже самое и на работе. Если у меня падает код, то это возможно из-за недоступности сервиса или отсутствия данных. Писать код это удобно.. но недостаточно.
И собственно самое главное. Что будет дальше? Я думаю, что рано или поздно его настроят, чтобы он мог ходить по сети и обрабатывать весь архитектурный контекст. Мы тогда начнем выполнять более абстрактные задачи и более масштабные. Тогда вместо 100 программистов, пишущих одно приложение, будет 100 программистов, пишущих 100 приложений.
Ну или 100 безработных программистов, устроившихся на завод! Наконец-то! А то сколько можно уже столько зарабатывать!
Задать вопрос анонимно
Telegram
Анонимные сообщения 💬
Этот бот умеет отправлять и принимать анонимные сообщения.
По рекламе: @fenixmi @YuriyBenya
По рекламе: @fenixmi @YuriyBenya
👍20🔥5❤3😁1
Как должно выглядеть резюме?
На картинке я обозначил САМЫЕ ОСНОВНЫЕ МОМЕНТЫ
1. Контакты обязательно дублируем в раздел О себе. Раздел о себе виден всем HR. Просто делайте это и не спорьте.
2. Город ставим Москва. В вашей деревне нет Дата Инженеров. Все деньги в Москве. Вакансии с удаленкой тоже находятся с локацией МОСКВА. Просто делайте это и не спорьте.
3. Желаемая должность всегда Дата Инженер. Никаких python developer
4. Опыт - мимнимум 1 год. Лучше ставить 2 года. Даже если это учебный опыт, ставим 1-2 года. Практика показывает, что некоторые Тим Лиды даже не читают, что там написано. Ваша задача пройти фильтры по годам опыта. Если вы вкатываетесь в профессию, то ставите 1-2 года. Не надо туда писать опыт продажи галстуков или работу пожарным. Это никому неинтересно. Ваша задача сделать РЕЛЕВАНТНОЕ РЕЗЮМЕ.
5. Должность пишем опять Дата Инженер. Везде.
6. Краткое описание, че мы делали. Если команды не было, можно написать, что это учебный и удалось построить pipeline или может помогли кому-нибудь с парсингом сайтов или API. 3-4 пункта МИНИМУМ. Иначе, как это вы учились, что нечего написать.
7. Делаем красивые булеты. Это такие точки. Чтобы было удобно читать. И обязательно расписываем ваши кейсы. Если это учебный, то можете попросить CHAT GPT нормально упаковать слова. Если вы на это неспособны – поздравляю, вы тупой! Я когда закатывался, у меня не было ни моего канала, не бусти, НИЧЕГО.
8. Водительские права не указываем.
9. Универ указываем. Если нет, не указываем.
10. Курсы можно не указывать - на ваше усмотрение. Главное, чтобы не сильно перегрузить резюмешку
У вас должно выглядить ПИЗДАТО И ЧИТАЕМО. Вашу PDF будут читать такие же люди, как и вы. Не надо делать на отъебись. Если вам в кафе плюнут в тарелку, вы же не будете это кушать. Так вот не плюйте людям. Дайте им то, что они ищут. Это ведь рынок и вы продаете свою кандидатуру.
И, прошу, читайте наш ROADMAP
Мы там все давным давно расписали. Оно выстрадано реальным ТРУДОМ
На картинке я обозначил САМЫЕ ОСНОВНЫЕ МОМЕНТЫ
1. Контакты обязательно дублируем в раздел О себе. Раздел о себе виден всем HR. Просто делайте это и не спорьте.
2. Город ставим Москва. В вашей деревне нет Дата Инженеров. Все деньги в Москве. Вакансии с удаленкой тоже находятся с локацией МОСКВА. Просто делайте это и не спорьте.
3. Желаемая должность всегда Дата Инженер. Никаких python developer
4. Опыт - мимнимум 1 год. Лучше ставить 2 года. Даже если это учебный опыт, ставим 1-2 года. Практика показывает, что некоторые Тим Лиды даже не читают, что там написано. Ваша задача пройти фильтры по годам опыта. Если вы вкатываетесь в профессию, то ставите 1-2 года. Не надо туда писать опыт продажи галстуков или работу пожарным. Это никому неинтересно. Ваша задача сделать РЕЛЕВАНТНОЕ РЕЗЮМЕ.
5. Должность пишем опять Дата Инженер. Везде.
6. Краткое описание, че мы делали. Если команды не было, можно написать, что это учебный и удалось построить pipeline или может помогли кому-нибудь с парсингом сайтов или API. 3-4 пункта МИНИМУМ. Иначе, как это вы учились, что нечего написать.
7. Делаем красивые булеты. Это такие точки. Чтобы было удобно читать. И обязательно расписываем ваши кейсы. Если это учебный, то можете попросить CHAT GPT нормально упаковать слова. Если вы на это неспособны – поздравляю, вы тупой! Я когда закатывался, у меня не было ни моего канала, не бусти, НИЧЕГО.
8. Водительские права не указываем.
9. Универ указываем. Если нет, не указываем.
10. Курсы можно не указывать - на ваше усмотрение. Главное, чтобы не сильно перегрузить резюмешку
У вас должно выглядить ПИЗДАТО И ЧИТАЕМО. Вашу PDF будут читать такие же люди, как и вы. Не надо делать на отъебись. Если вам в кафе плюнут в тарелку, вы же не будете это кушать. Так вот не плюйте людям. Дайте им то, что они ищут. Это ведь рынок и вы продаете свою кандидатуру.
И, прошу, читайте наш ROADMAP
Мы там все давным давно расписали. Оно выстрадано реальным ТРУДОМ
❤26🔥16👍8😁2😱2
Forwarded from Инженерообязанный🫡 | Блог Дата Инженера
boosty.to
Евгений Виндюков - Роадмаперы | Вкат в IT
🎉 Бусти открыт! Уровень «Роадмаперы» уже доступен для подписки! Если ты хочешь стать дата-инженером и идёшь по нашему Roadmap’у, то это место для тебя. Внутри: ✅ Чат с единомышленниками, которые учатся вместе с тобой ✅ Еженедельные созвоны — обсуждаем…
Кто самостоятельно обучается или хочет обучать по Roadmap'у, сегодня в 20:00 состоится первый созвон в рамках сообщества "Роадмаперы
Все добра
Please open Telegram to view this post
VIEW IN TELEGRAM
👍7❤5🔥2
Надо знать более 30 инструментов для DE!
Я тут решил посчитать кол-во инструментов, которыми пользуется ДЕшник и вышло более 30 штук. Очевидно, что туда входили и Hive и Clickhouse и какой-нибудь Bash или Spark. Очень под большим сомнением я бы выбрал это направление, если бы мне сказали на старте, ЧТО НАДО ЗНАТЬ ВСЕ!
Поэтому я бы расставил для себя и других такие приоритеты. Например PostgreSQL, Python, Airflow, Git, Bash. Вот реально на этих инструментах уже можно написать простенький pipeline, который и хранит и обрабатывает ваши данные. Конечно не BigData, но и она не всегда требуется.
Но остается еще одна проблема. Вот мы отфильтровали из 30 инструментов только 5. Супер, понятно, что требуется рынку, но откуда нам знать, как их теперь использовать, для чего они вообще нужны?
В далёком 2022 я очень много пересматривал видосов англоязычных авторов, но у них там было много Amazon, Google и так далее. А мне хотелось что-то доступное и локальное! Ну вот кто такой Дата Инженер, в чем его смысл?
Кстати, имейте в виду, что информация даже двухлетней давности уже сейчас начинает устаревать и пересматривать более свежие выпуски "Кто такой Дата Инженер" вполне разумный поступок! Особенно в эпоху развития ChatGPT...
Если вы спросите, а где же тогда посмотреть самый свежий выпуск?
Например, я бы порекомендовал ребят из karpovꓸcourses
У них как раз 15 июля в 19:00 МСК будет бесплатный вебинар на эту тему
вот кстати ссылка, приходите➡️ https://clc.to/erid_2W5zFHKo51a
Спикеры:
📌 Евгений Ермаков — PhD, руководитель платформы данных, ex-Yandex, ex-Mailꓸru, ex-Glowbyte
📌 Дина Сафина — руководитель платформы данных, ex-Ozon.Fintech, ex-Mailꓸru
Реклама. ООО "КАРПОВ КУРСЫ". ИНН 7811764627. erid: 2W5zFHKo51a
Я тут решил посчитать кол-во инструментов, которыми пользуется ДЕшник и вышло более 30 штук. Очевидно, что туда входили и Hive и Clickhouse и какой-нибудь Bash или Spark. Очень под большим сомнением я бы выбрал это направление, если бы мне сказали на старте, ЧТО НАДО ЗНАТЬ ВСЕ!
Поэтому я бы расставил для себя и других такие приоритеты. Например PostgreSQL, Python, Airflow, Git, Bash. Вот реально на этих инструментах уже можно написать простенький pipeline, который и хранит и обрабатывает ваши данные. Конечно не BigData, но и она не всегда требуется.
Но остается еще одна проблема. Вот мы отфильтровали из 30 инструментов только 5. Супер, понятно, что требуется рынку, но откуда нам знать, как их теперь использовать, для чего они вообще нужны?
В далёком 2022 я очень много пересматривал видосов англоязычных авторов, но у них там было много Amazon, Google и так далее. А мне хотелось что-то доступное и локальное! Ну вот кто такой Дата Инженер, в чем его смысл?
Кстати, имейте в виду, что информация даже двухлетней давности уже сейчас начинает устаревать и пересматривать более свежие выпуски "Кто такой Дата Инженер" вполне разумный поступок! Особенно в эпоху развития ChatGPT...
Если вы спросите, а где же тогда посмотреть самый свежий выпуск?
Например, я бы порекомендовал ребят из karpovꓸcourses
У них как раз 15 июля в 19:00 МСК будет бесплатный вебинар на эту тему
вот кстати ссылка, приходите
Спикеры:
📌 Евгений Ермаков — PhD, руководитель платформы данных, ex-Yandex, ex-Mailꓸru, ex-Glowbyte
📌 Дина Сафина — руководитель платформы данных, ex-Ozon.Fintech, ex-Mailꓸru
Реклама. ООО "КАРПОВ КУРСЫ". ИНН 7811764627. erid: 2W5zFHKo51a
Please open Telegram to view this post
VIEW IN TELEGRAM
❤25👍7🔥5🤔4👏1
Media is too big
VIEW IN TELEGRAM
📍Прошло уже 2 недели буткемпа — и вот, что там происходит:
Все задачи — в Jira, весь прогресс — на виду. Можно смотреть, какой опыт получает человек. Наша задача вообще решить проблему накрутки опыта и сразу выращивать релевантных спецов.
Мы кстати получаем хороший фидбек от ребят и сразу правим и корректируем программу обучения. Поэтому второй поток будет мощнейшим!
Когда старт второго потока?
Новый поток стартует ориентировочно 1 сентября. Можете пока залететь в общий чатик, где уже более 800 человек. Там можно обсудить все моменты, касательно работы, резюме и обучения!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥12👏8❤6👍4
Отвечаю на вопрос и выдаю БАЗУ!
1. Архитектуру БД не строят на работе, поэтому и в буткемпе таким не занимаемся
2. Слои данных создавать - это ровным счетом создать схему в бд или папку в S3 и грузить туда данные
3. Как перемещать данные да. Это ребята самостоятельно пробуют делать. Полностью пайплайн пишут
4. Тесты корректности данных только на кол-во строк, кол-во пустых значений можно делать. Но внедрять data quality, когда на работе этого ну будет - нет.
Большую часть теории и сказок про дата Волты, построение слоев хранилищ по медальону и так далее рассказывают продавцы курсов. По факту люди, приходя на работу начинают заниматься обычным перекладыванием из одного места в другой с минимальными трудозатратами. Особенно на Джун, мидл уровне.
У компании нет времени, пока ДЕшники придумают свою гениальную логику пайплайна. Все, как и везде, сроки горят, надо уже вчера сделать. Поэтому всякий тюнинг летит в корзину.
Я вот помню упарывался по отличию Кимбала и Инмона, 3НФ и дата волту. В итоге это нахрен нигде не пригодилось. Все, как у нас в жизни. В школе нас дрючат за логарифмы и синусы, а потом на работе мы бумажки перекладываем. Абсолютно такая же хрень и в IT.
Вы еще сильно разочаруетесь, что учили так много всего, а на работе в итоге занимаетесь из этого 1 процентом. Особенно в банках и близ госух.
Задача людей на буткемпе научиться презентовать свой опыт грамотно, просто отвечать(даже бездумно) на типичные вопросы с собесов и уметь пользоваться инструментами (уметь написать пайплайн самостоятельно).
А для тех, кто считает иначе - он может самостоятельно, как сделал это когда-то я, пойти учить Си в школе21, пойти учить Кимбала и Инмона, купить сто книжек, а потом пойти на собес и с гордостью отвечать на эти вопросы..
Только потом вы будете работать с людьми, которые этого не делали, а получать они будут больше и еще они будут моложе, красивее и успешнее. А вы по потеряете кучу времени, которое не вернуть.
Вот и вся сказка.
Больше БАЗЫ в чате
➡️ Вступить в чат
А это наш мощнейший бусти
➡️ Роадмаперы
1. Архитектуру БД не строят на работе, поэтому и в буткемпе таким не занимаемся
2. Слои данных создавать - это ровным счетом создать схему в бд или папку в S3 и грузить туда данные
3. Как перемещать данные да. Это ребята самостоятельно пробуют делать. Полностью пайплайн пишут
4. Тесты корректности данных только на кол-во строк, кол-во пустых значений можно делать. Но внедрять data quality, когда на работе этого ну будет - нет.
Большую часть теории и сказок про дата Волты, построение слоев хранилищ по медальону и так далее рассказывают продавцы курсов. По факту люди, приходя на работу начинают заниматься обычным перекладыванием из одного места в другой с минимальными трудозатратами. Особенно на Джун, мидл уровне.
У компании нет времени, пока ДЕшники придумают свою гениальную логику пайплайна. Все, как и везде, сроки горят, надо уже вчера сделать. Поэтому всякий тюнинг летит в корзину.
Я вот помню упарывался по отличию Кимбала и Инмона, 3НФ и дата волту. В итоге это нахрен нигде не пригодилось. Все, как у нас в жизни. В школе нас дрючат за логарифмы и синусы, а потом на работе мы бумажки перекладываем. Абсолютно такая же хрень и в IT.
Вы еще сильно разочаруетесь, что учили так много всего, а на работе в итоге занимаетесь из этого 1 процентом. Особенно в банках и близ госух.
Задача людей на буткемпе научиться презентовать свой опыт грамотно, просто отвечать(даже бездумно) на типичные вопросы с собесов и уметь пользоваться инструментами (уметь написать пайплайн самостоятельно).
А для тех, кто считает иначе - он может самостоятельно, как сделал это когда-то я, пойти учить Си в школе21, пойти учить Кимбала и Инмона, купить сто книжек, а потом пойти на собес и с гордостью отвечать на эти вопросы..
Только потом вы будете работать с людьми, которые этого не делали, а получать они будут больше и еще они будут моложе, красивее и успешнее. А вы по потеряете кучу времени, которое не вернуть.
Вот и вся сказка.
Больше БАЗЫ в чате
А это наш мощнейший бусти
Please open Telegram to view this post
VIEW IN TELEGRAM
👍26❤12🔥7😁7🤔4
Нафига так много знать в DE?
Собрал самые популярные инструменты для DE и написал ДЛЯ ЧЕГО ОНИ ИСПОЛЬЗУЮТСЯ.
Сюда можно еще добавить Github, Bitbucket и Gitlab - они для хранения кода.
На работе будете пользоваться, грубо говоря, ОДНИМ из каждой картинки. Поэтому можно взять только один инструмент и упороться по нему. А остальные знать поверхностно.
➡️ Если что, материал есть в нашем БЕСПЛАТНОМ ROADMAP!
В коментарии приглашаю душнил, которые скажут, что-нибудь про map reduce и hive или rabbitMQ или что dbt это не язык. Но вы их не слушайте. А читайте наш роадмап - это РАЗЪЕБ
Собрал самые популярные инструменты для DE и написал ДЛЯ ЧЕГО ОНИ ИСПОЛЬЗУЮТСЯ.
Сюда можно еще добавить Github, Bitbucket и Gitlab - они для хранения кода.
На работе будете пользоваться, грубо говоря, ОДНИМ из каждой картинки. Поэтому можно взять только один инструмент и упороться по нему. А остальные знать поверхностно.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥29👍9❤8👏2😁2