Обновил конспекты:
Добавил новые темы: Apache Spark SQL, Apache Spark Streaming, Apache Spark (базовый) + Вопросы с собеседований

Статистика:
24 человека приобрели конспекты. (Спасибо 🤗)
18 человек прошли опрос.
17 Человек - Удовлетворены материалом канала
1 человек - не удовлетворен.


Материалы, которые доступны в канале, представлены ниже:
Доступ: по ссылке

Навигация:
Apache Spark: Basic основы:
Клик
(Обзор Apache Spark + Apache Kafka + Apache Spark Streaming + Spark SQL)
Apache Spark: Advanced
Тема 1: Проблемы и Оптимизация
Тема 2: Spark 3.0 и Scala UDF
Тема 3: Тестирование и деплой
Тема 4: Мониторинг

Вопросы с собеседований (15 вопросов):
Часть 1
Часть 2

Apache Spark: Практика
1. Настройка Spark сессии: Пояснение по настройкам
2. Примеры hint'ов при различных джоинах
3. Распределение данных

Сегодня со мной играет жадность. Сильная жадность, не знаю как это по-другому сказать.
Решил я походить на собеседования, выбрал парочку компаний, где казалось что будут высокие зарплаты и интересные проекты.
Получил оффер выше среднего по рынку в $. (Не хочу говорить, вдруг что)
И сейчас сижу думаю, вот я на одной работе работаю по 6-8 часов, стоит ли брать вторую работу?

Ну допустим, смогу я уделять работе по 10 часов на два проекта? Возможно. На сколько меня хватит в долгую?
У меня оба проекта с нуля (ничего нету, строится все с нуля). Единственный DE.

Сижу, сижу, думаю. Есть ещё пара дней на принятие оффера, но я почему то склоняюсь к decline.

Понятное дело, что в долгую на двух проектах невозможно играть лидирующую роль единственного DE. Через некоторое время все равно сгоришь.

Интересно ваше мнение.

Отказал. Под конец решил ещё добавить +25% к текущему предложению. Не в бюджете. Думаю +10% можно было.

Пойду отдохну.

Яндекс написал:
-"Добрый день! ...... вакансия Доставка DA"
-Подскажите вилку
-секрет
- Рассматриваю "рандомная сумма для отказа". удаленка
- У нас только гибрид
😔

Вакансия: Data Engineer (Senior)
Компания: Lamoda
Предполагаемая вилка: 450к на руки ( запрашивал 500к)
Период собеседования: Ноябрь 2024
Формат работы: Удаленная работа
Этапы собеседований:
HR-> Tech int. -> Offer
Краткая справка о процессе интервью:
Написал HR везде: Whatsapp, почта, телега. Ответил ему что 500к, так чисто ради интереса. Сказал что не в вилке.
А у них там вакансия реально хардовая: Scala, Java, Spark Streaming/Flink, Kafka. Я удивился.
Попрощались и всё.
Знаю что у них middle'ы получают около 320-340к на руки.

Господи, Яндекс, что у вас происходит. То Я.облако отвалилось, то Яндекс доставку отменили. Дайте покушать и поработать нормально. Я хочу спокойно жить. (Сгорел, ждал доставку 1 час) Наймите инженеров хороших.

Методы сдерживания сотрудников:
Пока я работал в банках, я замечал что новые люди приходят циклично, исходя когда из того когда им выплачивают премию. Как пример, можно привести СБЕР, откуда сотрудники просто не увольняются, пока им не выплатят премию.
Другие компании стараются удержать сотрудника другими способами: комфортный офис/ крутая атмосфера / спокойный темп работы / корпоративы.
Ещё одним способом привлечения и удержания высокая зарплата или зарплата с % от прибыли продукта/стратегии/ продажи.

На данный момент я стал наблюдать как компании переходят с годовых премий на квартальные премии или переходят на компенсацию все в зарплату.

Ещё некоторые компании могут удерживать сотрудников психологически. Это очень часто используются в компаниях, в которых важны хорошие специалисты. C-level пытается создать дружескую/близкую атмосферу, при которой сложно покинуть компанию чисто психологически и в случае ухода вам будет морально тяжело.

И все сводится к нескольким мерам сдерживания:
1. Годовые/квартальные премии
2. ДМС/ онкологические страховка и прочие страховки)
3. Программа инвестирования на 3 год ( доходность 50%+ в год)
4. Процент с продукта - %
5. Льготные отпуска, атмосфера и корпоративы
6. Работа откуда угодно (WorldWide)
7. ИТ-ипотека, льготные условия кредитования сотрудников
8. Компенсация еды, такси (я слышал о компенсации путешествий)

Читал я тут пару постов в LinkedIn, что ребята ищут работу месяцами около 9-11 месяцев. По большей части относится к программистам с специализацией Frontend, Backend, Android/IOS. Некоторые пишут что сильно выгорели, ходят на различные консультации, им там правят резюме и так по кругу по разным специалистам. Я честно не могу осознать в каком состоянии находятся люди, которые так долго ищут работу.
В одном из постов я заметил что ребята примерно проходят 10-15 собеседований в месяц. Что достаточно чтобы удивить хотя бы одну команду своими навыками.
Моя статистика наверное будет нерелеватная по отношению к ним, но я думаю что за 15 тех. собесов можно получить хоть один оффер.

Честно, я не представляю как так происходит, ведь эти ребята готовятся, в отличии от меня😁

Т.е. условно на 100 собесов у меня 7-10 офферов. Я думаю с подготовкой к собесам будет 20 офферов к 100.
Но так же я считаю что моя цифра нерелеватна к статистике потому что я хожу куда угодно. Допустим большинство компаний могут быть изначально не в бюджете моих хотелок, но все равно зовут на собеседование.

Раз год подходит к концу хотел бы у вас спросить сколько собеседований вы прошли в этом году.

P. S. Моя статистика в этом году 90+ собесов за год.

Если кто-то хочет поделиться прохождением собеседований: @noelsethink
You are welcome🤗

Моя статистика, кто не видел:
https://t.iss.one/get_rejected/69

Что-то новенькое. Не подавал откликов, не смотрели мое резюме, но в базу добавляют.

Поиск в 2024: Как это было.

Когда я начинал поиск работы я не рассчитывал на валютную работу, я просто искал любую работу.
Первые собеседования на валютную работу у меня начались еще весной. Я собеседовался в стартап и тогда они предлагали около 3500$. Их вакансию я нашел на hh.ru, собес был достаточно несложным. Первый этап был на SQL, Clickhouse и архитектуру. Второй был Live-coding, который я завалил.
После было две компании, которые нашел через Linkedin.
Одно собеседование на 6000$, но почему то мне тогда отказали и не позвали на техничку. После была еще одна вакансия на Linkedin. Я случайно наткнулся на рекрутера из Польши и спросил: Есть ли вакансия DE? И у них тогда была открыта позиция DE на 3000$. Собеседование было сложное. Спрашивали по ООП, по pylint, по unit тестам и много чего другого. После пришел отказ.
Было еще попытки найти вакансии в Европе с переездом на Кипр. Из всего возможного меня рассмотрели только в Exness, куда было два этапа собеседования. Пост
Подавался к ним через их сайт, так как знал что это компания нанимает ребят из РФ.

После этого в мае я устроился на работу за рубли и прекратил поиск, но уже в июле начал искать валютную работу. Вакансии искал через различные каналы по тематикам. Нашел вакансию в одну компанию, подался. Отказали. После увидел эту вакансию на HH.ru. Подробнее тут

Потом много кому писал на линке, откликнулся один CEO. Направил меня к COO и он мне предложил вакансию DA/DE. Поговорили, дал задание на python, на факториал вроде бы. После пару задачек на pandas и SQL. После сказал, что в принципе все их устраивает. По условиям у них 3000$, офис 5/2, офис в Москва Сити. После испытательного возможен гибрид 4/1 или 3/2. + Есть ПО на отслеживание действий(клавиатура+ клики) . Я отказался, так как моя текущая зарплата на тот момент была выше и я их рассматривал как вторую работу. После пообщались про сферу и он мне дал 100 контактов рекрутеров из их сферы. После написал всем рекрутерам и только 2-5 рекрутера ответили, что у них либо есть такая позиция, либо будет в будущем.
По итогу сходил на собес в PARI. Они могут платить 3000$, но меня это тоже не устроило и я пошел искать дальше.
После ситуации с увольнением: тут я начал проходить просто собесы куда угодно, но все вакансии я находил исключительно на HH.ru и парочку через знакомства через Linkedin. (примерно написал 20-40 контактам, что по итогу вылилось в 4-5 собеседований: связывался прежде всего с CEO/CTO).
После вышел на ряд компаний, которые платят в валюте на зарубежные счета или на счета ИП с пересчетом на день выплаты.

Но что я понял, если вы прям стремитесь найти валютную работу, вам нужно покинуть РФ и переехать в Грузию/Турцию/Казахстан. У меня большинство знакомых, которые нашли работу за рубежом первым делом куда-то переехали. Много ребят уехали в Нидерланды, Luxemburg, Португалию и так далее. Естественно они искали работу через Linkedin. (Почти у всех специализация Java Dev, поэтому им было не так сложно найти работу). По опыту от 2 до 8 лет работы.

Но если вы хотите валютную работу в РФ, то открываем ИП и идем собесится в GameDev, Healthcare стартапы из США и HFT фонды, которые могут платить на счет ИП.

Вакансия: Data Engineer NRT (Senior)
Компания: AliExpress
Предполагаемая вилка: 450k на руки
Период собеседования: Декабрь 2024
Формат работы: Удаленная работа
Этапы собеседований:
HR-> Tech interview -> Interview -> Offer
Краткая справка о процессе интервью:
Позиция на замену. Спрашивали про Spark Streaming, Kafka, Clickhouse.
Целый час 30 спрашивали все подряд, я устал. Показал себя слабо по сравнению с другими собесами.
Спрашивали про Spark Shuffle и т.д.
Были задания на System Design

Обновил конспект по Greenplum:
Добавил новые темы: Конспекты 1-6 представлены ниже

Статистика:
8 человека приобрели конспекты. (Спасибо 🤗)
5 человек прошли опрос.
5 Человек - Удовлетворены материалом канала


Материалы, которые доступны в канале, представлены ниже:
Доступ: Клик
Навигация:
Greenplum:
Конспект > 1 урок > Реляционные и MPP Базы данных. Что и как в них хранить
Конспект > 2 урок > Объекты баз данных. Зачем и что используется
Конспект > 3 урок > Обработка запросов в обычной СУБД и в MPP СУБД
Конспект > 4 урок > Обработка запросов в обычной СУБД и в MPP СУБД: Практика
Конспект > 5 урок > Применение R, Python, Geospatial в расчетах на GreenPlum
Конспект > 6 урок > Дополнительные возможности GreenPlum: Практика

Основной конспект по основам Greenplum:
Презентация
• Разберёмся как устроен GP
• Рассмотрим как организованы данные
• Почитаем планы запросов