Довольно давно на этом канале не менялась аватарка, поэтому жду предложений в комментах, потом устроим голосование какая лучше

UPD: можно также предлагать еще и новые названия, но по нему голосования уже не будет, решать буду я

Официально заявляю:
Начинаю подготовку к грейдированию с помощью https://ml-handbook.ru/
(Вспомнить математику, лежащую в основе мл лишним уж точно не будет)

Пошел на лекцию по hft:

Ожидание > узнаю основы высокочастотного трейдинга, начну пробовать новую для себя область

Реальность > послушал 1.5 часа какую то воду и покушал пиццы с пирогами

Начал делать дз

Ожидание:
за день сделаю всю матешу, алгосы, затехаю и отправлю

Реальность:

Какое крутое у меня расписание:
понедельник - 3 пары
вторник - 3 пары, первые 2 из которых онлайн
среди - 3 пары
четверг - 3 пары с окном в 1 час
пятница - 1 онлайн пара 🤡

Что я могу сказать по поводу первых 2 недель учебы?

⌛️ Время

В целом я пока не умер и успеваю все делать, в этом несколько помогает определенное планирование (очень примерное):

утро + вечер по будням - работа
пятница и суббота с утра до ночи - домашки
воскресенье - доделываю что не успел по домашкам или по работе

⏰ Почему планирование и выполнение домашек заранее играет важную роль?

Всегда могут возникнуть какие-то непредвиденные ситуации, форс-мажоры или что-то еще, что может мне помешать либо сделать какую-нибудь домашку перед дедлайном, либо допилить что-либо на работе. Как раз чтобы не допускать такого я и стараюсь следовать хотя бы примерно своему плану

💻 Немного о работе

Несмотря на то, что ближайшее время нагрузка скорее всего будет расти, я все-таки решился записаться на грейдирование, оно пройдет 27 сентября, очень надеюсь что все-таки не переоцениваю свои навыки и способности и смогу официально стать миддлом (даже понемногу успеваю готовиться и вспоминать некоторые давно забытые вещи из основ)

🖥 Учеба в целом

Наконец-то начинает приходить понимание того, что происходит на алгебре и матанализе (дискретная математика пока понятная и я бы даже сказал приятная), пока без проблем закрываю контесты по алгосам, но начинают появляться домашки по плюсам, так что кажется теперь будет еще чуть тяжелее

P.S. скорее всего подобные посты будут выходить каждую 1-2 недели, так как я пока особо нигде не хакатоню и немного подзабил на свой проект - а значит тем для интересных постов будет не так много, по крайней мере ближайшее время

#шитпостинг
✅ Написал пост о том, что все под контролем и на следующий день проспал первую пару

ML System Design ODS Course

Уже сегодня - 19 сентября - открывается курс по ML System Design для начинающих. Автор курса - Дмитрий Колодезев, директор Promsoft.

Первая лекция уже доступна на странице курса! Группа для участников в тг тут.

Что входит в курс:

- ML-системы в реальной жизни с точки зрения софта, железа и бизнеса.
- Итеративный процесс построения ML-систем

Что не рассматривается:

- Алгоритмы машинного обучения
- Дата-инженерия
- Дизайн пользовательского интерфейса
- Как работать с докером и k8s

Курс состоит из видео, статей, докладов студентов, работы над проектом.

#шитпостинг
Шла третья неделя учебы....
✅ Наконец-то получил студак и пропуск в вуз

#шитпостинг
> отправляю лабу по плюсам на проверку автотестами в 4 часа ночи
> статус: в очереди 👍

#шитпостинг
⚡️⚡️⚡️Спидран по закрытию всех пробелов по теории мл'я объявляется открытым.

Дедлайн через 2 суток

#шитпостинг
> кернел падает сразу после 6-часового обучения модели
> 2 дня пытаюсь фиксить
> *смотрю использование озу во время обучения и понимаю что он падает тупо из-за нехватки оперативки*
> *понимаю что впустую потратил целых 2 дня своей жизни на полную фигню*

✅ Спидран завершён успешно, пост про грейдирование будет чуть позже

⚡️ Итоги грейдирования

Всего оно длилось 2 часа и 40 минут, небыстро конечно, но жить можно.

- проект
С начала я рассказывал про свой самый крупный (на мой взгляд) проект в точке - зачем он нужен, как я его делал, какой вклад внес, каковы результаты и тд. В целом получилось неплохо (но хуже чем я думал)

- базовые скиллы
Были простые вопросы по питону - закрыл его на миддла, с гитом и башем было сложнее, но на них особо и не смотрят, также слабовато ответил про sql - не умею в оконные функции

- мл навыки
Тут было все гораздо приятнее, без проблем ответил почти на все вопросы по numpy, pandas, бустингам, визуализации, кластеризации, дл, тестированию, основам мл, метрикам и тд - довольно уверенно закрыл все на миддла (кроме АБ тестирования)

- специализация
Тут все прошло прекрасно - рассказал что делал в НЛП, ответил на пару простых вопросов, уверенно закрыл на миддла (один из грейдирующих поставил даже миддл+/сеньор)

- итоги
Миддла не дали, по причине того, что слабоват SQL и проект недостаточно полный (не выводил в прод и не делал АБ тестов уже в проде), но сказали что очень хорошо закрыл хардскиллы (мл как раз полностью на миддла, а если забыть про sql то и базу тоже) и в целом все прошло хорошо, но вот проект недотянул

P.S. если вдруг у кого-то есть вопросы могу ли я реферить - могу, но учитывайте, что на данный момент свободных дс позиций кажется нет

⏰ На этих выходных будет хакатон от газпрома и итмо - регистрация заканчивается сегодня (так же как и дедлайн по отправке тестового задания, но оно все равно простое), так что если кому-то резко захотелось поучаствовать в чем-нибудь - времени уже мало.

P.S. после хака обязательно будет пост о том как все прошло

Текущее мнение о хакатоне:

- организация

В целом все неплохо, на площадках дают еду, есть даже ночной перекус, также можно достаточно свободно гулять по вузу

- данные

108 строк на трейне и 10 строк на тесте (5 - паблик, 5 - приват) - впринципе уже на этом этапе можно было забить на анализ и модели и тупо засылать рандом)))) Так как на 5 строках все равно будут слишком шумные предсказания, которые не дадут адекватного представления о реальном качестве модели.

Ну и да, по этой причине - фактически победа будет определяться частично случайным образом)

- итоги

Хак конечно фигня полная, но денег всё-таки хочется, так что продолжаем работать (ну а ещё пока удивительным образом держим 1е место по паблик лидерборду, но очев это тупо потому, что паблик тоже из 5 строк всего)