Вакансия: Data Engineer (Senior)
Компания: Авито
Предполагаемая вилка: 300-620к на руки ( я не запрашивал, взял инфу с getmatch)
на самом деле говорят зп чуть ниже чем в оф. вилке.
Период собеседования: Весна 2024/ Осень 2024
Формат работы: Удаленная работа
Этапы собеседований:
HR -> Coding (SQL+Python) -> Tech interview -> Fit Interview -> Offer
Краткая справка о процессе интервью:
Собеседование немногое душное. Решали сначала задачки на SQL, надо было сначала решить пару SQL задач на джоины. Спрашивали про типы физических join'ов.
Одна из задачек была на работу с Anchor Modeling и моделированием таблиц под него.
После были задачки на python. Первые 2 стандартные, но потом дали задачку реализовать алгоритм физического джоина (Примеры: hash join, BTREE, и т.д .)
Попытался его реализовать хэшируя значения для сравнения и поиска похожий значений.
Дальше не прошел. Сказали есть хорошие навыки кодинга, но недостаточные для позиции

Ребят, у меня выходит слишком загруженная неделя. Делаю для вас контент. (Или для себя, посмотрим)

В связи с завершением голосования касательно зарплат был бы рад чей-то помощи. Нужен DA/BI/DE, который напишет пару запросов к данным и как-то красиво их представит. (Это в идеале, мне достаточно пару запросов)

Данные уже очищены.
Формат предоставления доступа к данным:
1. Даю вам схему данных и описание какие типы данных там хранятся.

Грейды (Вариации)
Профессии (Вариации)
Компании (уже свёл все под одну гребёнку, остались только кто единичны).

2. Вы предоставляете SQL-скрипты, я их запускаю локально. (Агрегирующие)

3. Profit!

Детальные данные не будут передаваться!!!! Анонимность вилок я сохраняю. (Результаты будут по формату как было описано ранее: https://t.iss.one/get_rejected/460

Отпишитесь кому было интересно написать пару запросов к данным:
@noelsethink

Знаете, хотел наверное давно сделать такой пост, да возможно уже был, но повторюсь.

Когда вы выходите на рынок труда и начинаете общаться с рекрутерами, не забывайте, что все мы люди и работаем в одной сфере. Некоторые забываются и думают что они короли на рынке, и могут вести себя, как им вздумается.

Грубит HR, прикалываться над ними, выводить их из себя. Курить на собеседовании, общаться на повышенных тонах, вести себя надменно. Когда это мы потеряли все человеческое. Почему нельзя вести себя нормально?

Вы думаете, ой, да кто так себя ведёт? Я тоже бы так подумал, но я читаю об этом на LinkedIn, слышу это от HR в личных беседах, это стало уже какой-то обыденностью и я с этого в шоке.

Надеюсь что 2025 году таких случаев станет меньше, хотя куда нам.

Сегодня на протяжении дня будет статистика по зарплатам на рынке в РФ и за рубежом, которую мы собирали с пятницы по понедельник.
Всего будет 13 постов с аналитикой, которую сделал один из подписчиков. (терпим)

Самые адекватные аналитические комментарии к картинкам пойдут в описание поста.
Посты будут выходить каждый 1 час, некоторые через 20-30 минут. Начало в 10:20 и до 19:00

Просьба поделать репосты и ставить различные реакции для понимания что информация полезна.

Средняя и медианная зарплата по грейдам в разбивке по валюте.
(для рублей указано в тыс. рублей)
Зарплата в $/EUR указана либо в net/gross, смотря как указывали в опросе.
Зарплата в RUB чаще всего указывали Net. (как мы знаем чаще всего GROSS+Премия == NET)

Зарплаты по специализациям/должностям в разрезе валюты

(для рублей указано в тыс. рублей)
Зарплата в $/EUR указана либо в net/gross, смотря как указывали в опросе.
Зарплата в RUB чаще всего указывали Net. (как мы знаем чаще всего GROSS+Премия == NET)

Распределение зарплат по грейдам по специализациям

Сравнение зарплат по компаниям (от 5 анкет)
Сортировка по средней зарплате

Уровень удовлетворенности зарплатой/работой по специализациям
Веса: (1- Да, Нет-0, 50/50 - 0,5)

Тут просто посмотреть кто на сколько недоволен) Я бы назвал это Индекс жадности
ETL самые довольные люди

Корреляция между зарплатой и уровнем удовлетворенности.

Были отранжированы специализации по зарплате и уровню удовлетворенности

Тут можно просто посмотреть какой специализации больше платят и кому что больше нравится.
DE в EUR одни из самых высокооплачиваемых профессий )

Распределение зарплат по валютам с конвертацией в рубли.

Можем увидеть что специалистам, которые получают в валюте платят в среднем выше.
Но на самом деле исходя из опыта, и в РФ можно получить достойное предложение)

Топ-3 компании по уровню зарплат в каждом грейде.

Можно понять где больше платят Senior/Middle и т.д.
Важно отметить, если число анкет было ниже 3, они не были учтены в статистике.

Соотношение зарплат по грейдам (относительно Junior) с фильтрацией выбросов.

Зарплаты пересчитаны в рубли.
Самое примечательно что Junior/Entry Level в FAANG получает больше чем остальные)))

Анализ по диапазонам зарплат.

К категории низкой оплаты отнесены все что ниже 25% перцентиля
к среднему что находится в диапазоне от 25% до 75%
Остальные относятся к высокому

Распределение по уровню удовлетворенности зарплатой/работой

Зарплаты в Евро/Долларах пересчитаны в рубли.

!!!Важный момент я у многих у кого было написано 50/50 отнес к Да, не знал что анализ будет зависеть от этого.

На сегодня всё!

My core до конца недели.

Доброе всем!
Просьба забустить канал: boost

Вас становится больше, а смайликов нет)

Спасибо за вчерашнюю активность:
15к просмотров
240 репостов
210 реакций
Стало понятно какая статистика более востребована.

Немного с работы.

Snowflake требует настроить MFA2 метод авторизации. После 1 апреля авторизация без использования MFA2 не будет работать.
По сути политика доступа к хранилищу Snowflake по паролю+ Auth коду.
Так же мне нужно было перевести пару учеток на сервисные без авторизации по MFA2.
Проблема в том, что у них не описания того, как сделать сервисные учетки.

Сначала создал две политики одну для обычных учеток и другую для сервисов:

CREATE AUTHENTICATION POLICY IF NOT EXISTS AUTHENTICATION_POLICY_REQUIRE_2FA
  AUTHENTICATION_METHODS = ('ALL')
  MFA_AUTHENTICATION_METHODS = ('PASSWORD', 'SAML')
  MFA_ENROLLMENT = REQUIRED
  CLIENT_TYPES = ('ALL')
  SECURITY_INTEGRATIONS = ('ALL')
  COMMENT = 'Enforce 2FA with DUO APP'
;

CREATE AUTHENTICATION POLICY IF NOT EXISTS AUTHENTICATION_POLICY_NONUSER_LOGIN
  AUTHENTICATION_METHODS = ('PASSWORD', 'KEYPAIR')
  CLIENT_TYPES = ('DRIVERS','SNOWSQL')
  COMMENT = 'Non-user logins are only allowed to authenticate through drivers via password or keypair'
;

Дальше для каждого пользователя раздал необходимую политику:

ALTER USER GET_REJECTIK
 SET AUTHENTICATION POLICY AUTHENTICATION_POLICY_REQUIRE_2FA;

Так же для снятии политики я использовал эту команду, так как ошибочно назначал не ту политику:

alter user USER_5 unset authentication policy;

А теперь к самому важному для сервисных учеток я использовал следующую команду, чтобы они не были заблокированы.

alter user DBT_USER set type = legacy_service;

legacy_service - позволяет авторизоваться через User + Password
service - авторизация без пароля. ( Видимо нужно для тех, кто пользуется Kafka )


Для проверки политик используется:

SELECT *
FROM TABLE(
    BM.INFORMATION_SCHEMA.POLICY_REFERENCES(
      POLICY_NAME => 'Snowflake_WH.SCHEMA.AUTHENTICATION_POLICY_REQUIRE_2FA'
  )

Пользуйтесь, кому как и мне нужно поддерживать Snowflake.