Однажды, я осознал, что недостаточно владею командной строкой linux и в целом не очень понимаю, как оно все там устроено. Старший товарищ посоветовал мне великолепную книгу Керниган, Пайк "The UNIX Programming Environment". Она есть в хорошем русском переводе (большая редкость!) и вы даже без труда найдете в интернете версию для ознакомления. Там описывается работа с ОС UNIX так, как задумывали создатели этой системы (авторы книги). Есть отсылки к истории и объяснения всяких названий и поведений по историческим причинам. Очень хорошо описана работа с sed и awk. Есть ещё раздел о программировании в среде (системные вызовы и иже с ними), но я эту часть не читал, рекомендовать не буду. Для продвинутого пользователя эта книга просто must read!

Продолжу свои мемуары

В Революте я ощущал, что мои знания и навыки используются от силы на 5%. Я сначала терпел и ждал. Потом очень удачно сотрудники HR начали собирать у нас фидбек о работе, и я очень развернуто пожаловался им. Потом я пробовал доносить свою обеспокоенность СТО. Но ничего не работало. Стартап должен деньги зарабатывать (на самом деле нет, только популярность), а не удовлетворять сотрудников. Я был не один такой и дискомфорт разработчиков копился, аккумулировался с недовольством некоторыми управленческими решениями внутри разработки, и это всё выливалось в постоянное нытье и некоторую токсичность в неформальных чатиках. А иногда и в официальных обще-организационных. Реакция менеджмента на это все была от вялой до пассивно-агрессивной.
Я вспоминал как кайфово было в трейдинге, где был перфоманс, всякие кастомные железки, а еще иногда можно было повтыкать в сложные формулы. Еще вспомнил, что были в нашем Дойче квант-девелоперы, которые кодили модельки. Там оптимизации были уже не только наши классические, бизнесовые, но и в выборе численных методов, а также в хитрых бизнес моментах, где можно срезать углы, что можно не пересчитывать, что можно считать не так точно и т.п. Захотелось заняться такими вещами. Тем более хотелось поглубже вникнуть в сам трейдинг и модели.
Встретился с бывшим начальником из Дойче. Я с ним и так встречался, но тут у меня еще и дополнительный повод появился. Спросил, нет ли у него такой работы (он стал уже совсем большой шишкой). Он попросил подождать, мол подумает.
Согласился пообщаться с тонной рекрутеров. Поделал всякие тестовые задания и попроходил собесы в кучу разных около трейдинговых контор от Кипра до Казахстана. Отказов нигде не получал. Но не нравились все локации. Кроме одной, меня пригласили на собес в Амстердам. Я с удовольствием поехал. Некоторые так даже бесплатно путешествуют, но я так не умею, это был пока единственный раз. Собесы я прошел.
Тем временем мне позвонил бывший начальник и объявил, что он перешел в другой банк, с маленьким инвестиционным подразделением, и предлагает мне пойти работать туда с ним, писать торговых роботов для опционов. Мы с ним неоднократно до этого обсуждали математические аспекты опционного прайсинга и рисков, так что я знал, что это будет интересно. Я согласился пообщаться с новой компанией. Техническое интерфью мне поставили через пару дней после этого разговора! Я говорил, что совершенно не готов (потому что это было еще до всех моих очных собесов, я только тестовые задания в несколько мест успел отправить). Но товарищ убедил меня, что я и так пройду. В итоге вся моя подготовка к собесу свелась к тому, что я посмотрел доклад будущего интервьюера с какой-то джуговской конференции, интересный!
С техническими вопросами на этом интервью мы разобрались минут за 15, а дальше были вопросы про бизнес, про торговлю в дойче, как она устроена. Естественно, я ничего толком не понимал, потому что до техцентра не снисходили такие детали, я знал только немного математики, механику рынков да термины. Это ж не револют, где я был в гуще событий! Но этого оказалось достаточно. Второе интервью, с командой, мне поставили уже после поездки в Амстердам.

В конечном счете я получил офферы из Амстердама и из конторы с бывшим начальником. Как мы с женой принимали решение — это отдельная история. Переезд в другую страну с полугодовалым ребенком дело страшное! Взвесив все за и против, я решил, что пойду в московский офис, потому что маленькая контора, никакого опционного кода еще нет — смогу лучше во всем разобраться. Так я и остался в Москве.

Главная мораль всех этих баек в том, что кумовство решает!

Только что прочитал длинно-коммент про крипто трейдинг в одном там закрытом (не тематическом) сообществе. В профиле у человека написано, что разработчик и трейдер. Пишет, что $20k/month изи.
Я в последнее время постоянно такое слышу, думаю, дай прочитаю, шо там.
А там ручной гемблинг: голова и плечи, ретрейсинги Фибоначчи 🙈

Может, правда можно влететь туда и собирать с этих детей маржу? 🤔

Когда я объявил, что сваливаю из Революта, произошло нечто интересное. Биздев моей команды был одним из крупнейших и ранних инвесторов (однокурсник Коли). Естественно он захотел понять, чего это я ухожу (мне выдали довольно приятного объема бонус, который только начал веститься и тут я вдруг валю — парадоксально). Я, конечно, сказал, что там трейдинг, математика, всё такое, но тот чел и сам бывший трейдер, стал копать глубже. Рассказал ему, что в принципе большинство московских (и питерских) разработчиков unhappy, все выгорают, постоянно ноют и вообще атмосфера, что называется токсичная. Услышав такой звоночек, умный человек сообразил, что надо бы это как-то поправить, а то все топовые разрабы разбегутся, как тараканы. И засетапили мне встречу аж со всеми executives, включая СЕО и СТО, где надо было сформулировать в чем проблемы.
Начал я готовиться к этой встрече и понял, что мои личные проблемы это фигня, я уже ухожу, а вот остальным тут еще работать. Так что я начал настойчиво опрашивать всех, кто когда либо ныл. В процессе обнаружилось, что конструктивных (не говоря уже об actionable) претензий сформулировать почти никто не может. В том числе я и сам не смог оформить некоторые из своих поднываний в проблему. Но поприменяв всякий коучинговый булшит типа пять почему и что можно сделать, чтобы это исправить, я собрал довольно внушительный список проблем.
На поверку оказалось, что 90% проблем относятся к технической составляющей (IT менеджмент, структура, культура общения между разработчиками и т.д.), так что после 15 минут болтовни с топами мы перешли с СТО к разговору тет-а-тет.
У нас с ним было несколько встреч, в течение нескольких дней или даже недель. Какие-то вещи мы просто обсуждали, я с ним соглашался и доносил его видение пацанам в удобоваримой форме, с аргументами и объяснениями. Что-то он обещал исправить (и даже исправил!), а суть чего-то из записанного мной мы так и не смогли понять. Пацаны говорят, что стало немного лучше (сначала говорили, что намного, но потом передумали). Мне точно было полезно. Осознал какие-то вещи и решения, где-то понял логику СТО и даже прошли какие-то обидки.
А еще я понял, что разработчики могут сколько угодно кичиться своей рациональностью, но на деле многие не могут даже вербализовать свои проблемы.

P.S.:
Если вам вдруг показалось, что это великая честь — говорить с долларовым миллиардером, то это не так. Коля вообще свой парень, часто тусует с командами в баре за одним столом. А ещё он сам меня зареферил в компанию: в дойче банке я работал в одной команде и сидел по правую руку от его одногруппника, который меня Коле и засорсил, когда узнал, что я ищу новое место.

Кумооовствооооо^W Нетворкинг, ребята.

Про аспирантуру писать не хочется. Ничего толкового у меня не вышло. Пару раз выступил на конференциях, где никто ничего не понял — вот и весь выхлоп. Но есть у меня чем поделиться в связи с моим тогдашним рисёрчем.

- В первую очередь вот этот шикарнейший обзор теории вширь:
https://www.cs.yale.edu/homes/aspnes/classes/465/notes.pdf
Если вы что-то уже знаете про распределенные системы или пишете диплом/диссер, то вот отличное место, чтобы начать свой лит обзор.
- Если вы еще мало знаете или ничего, то начать можно вот отсюда:
https://www.the-paper-trail.org/post/2014-08-09-distributed-systems-theory-for-the-distributed-systems-engineer/
Я начинал именно с этого списка, хотя в то время он немного отличался. Сайт вообще очень интересный.
- Если вам хочется по-русски и в формате видео, то буквально пару лет как я открыл для себя курс Романа Липовского на ФИВТе, ищите здесь:
https://youtu.be/Wmik-yspNY4
- Вспомнил! Для инженеров-прикладников и исследователей, не оторванных от жизни, есть сайт с описаниями архитектур всяких масштабных продуктов (Netflix, Zoom):
https://highscalability.com/blog/category/example

Я для себя сделал вывод, что программист это не элитная, не такая уж интеллектуальная и редко справедливо оплачиваемая профессия. Можно знать кучу всего, знать что-то очень глубоко, но на абсолютно любой работе тебе эти навыки будут требоваться 10, ну 20 процентов времени. А значит и маржинальность этих знаний и навыков не велика. Бизнесу ваши глубокие познания распределенных систем, с фундаментальными знаниями и обоснованиями и владение тремя стилями программирования, что мертвому припарка. Да, есть исключения, например, бизнес по разработке специализированного софта типа баз данных. Но в подавляющем большинстве случаев можно нанять Васю, который в интернете две статьи прочел, которых достаточно, чтобы решить текущие задачи и он денег меньше просить будет. А остальные ваши навыки могут вообще никогда не пригодиться, зачем за них платить?

Вы не подумайте, широкий кругозор и насмотренность делают программиста, как и любого профессионала, круче на всех фронтах. Можно брать идеи из одной области и применять в другой, можно предлагать решения, которые не очевидны. Но это сложно показать на собеседовании, это не продаётся.
Зато это ценится коллегами. Коллеги будут вас вспоминать, звать в свои новые компании, реферить вас знакомым с положительными отзывами. Но очень маловероятно, что это всё сконвертируется в деньги на вашем счету.

Не знаю пока, как в других профессиях, но в программировании это так, и это демотивирует.

"Мемуары" я закончил.
Дальше план такой:
- Составлю список из всех учебных материалов, упомянутых в канале
- Расскажу про обучение в ЦМФ, которое я закончил этой осенью [но оценок до сих пор нет (: ]
- Поделюсь мануалом по изучению истории и философии науки, которая меня сильно зацепила в аспирантуре, я сделал несколько лет назад для твиттерян
- Продолжу писать свои умные и глупые мысли на рандомные темы

Предложения и пожелания в комментах приветствуются

Мой бро тут тоже пишет всякое про институт. Здесь тред про информатику. Жиза
https://twitter.com/aarexer/status/1352533358555889664?s=19

Решил всё-таки объяснить, что я называю здесь словом "кумовство", а заодно рассказать о пользе нетворкинга.
Да, кумовством я иронично называю нетворкинг. Вот давайте смотреть примеры.

Этим летом познакомился с девочкой, которая занималась тогда методами рекрутмента в Mars. Она как раз проводила небольшое исследование-мероприятие "для своих": проводила игрушечные софт-скиллз интервью, давала фидбек и помогала к оным готовиться. Я никогда не понимал, что надо спрашивать, почему люди это спрашивают и, главное, имеют ли смысл их вопросы, когда они проводят софт-скиллз интервью. Так что я попросился в рамках такого мероприятия обучиться проведению софт интервью. Управились за час. Я очень много всего понял, если хотите — расскажу. Спойлер: не все люди, с умным видом задававшие софт вопросы, спрашивали что-то действительно важное, некоторые, видимо, просто хотят казаться важными.

А вот ещё свежий случай. Нам на работе нужно было построить инфраструктуру для квант-рисёрча. Никто из команды таким никогда не занимался, вендорское решение из начала 10-х показало свою полную несостоятельность. Мы не хотели снова ошибиться. Много читали, кого-то спрашивали. Но я вспомнил, что у меня есть друг, очень крутой дата инженер, между прочим С-левел, глава одного там дата инженерного подразделения. Я попросил его нас проконсультировать. Созвонились с ним и с командой на несколько часов, обрисовали картинку, послушали предложения, задали все вопросы.

Ещё более свежий пример! Ездил с ребятами с Физтеха (младше меня, студенты моей жены) на конференцию Hydra. Причем познакомился с ними случайно, в твиттере. С кем-то подружился. Один мне помог, несколько раз закинув наши вакансии в чатик с умненькими ФИВТами, в котором меня нет. Другой подсказывает по кликхаусу, потому что разрабатывает его. Вот в декабре, кажется, фича оказалась багом.

Иногда получается по знакомству договориться пообщаться с каким-нибудь крутым специалистом. Так я консультировался об архитектуре квант-рисерча у одного дойчевского VP, спрашивал людей и из других мест, но без личного знакомства шло туговато. Если вам есть, что рассказать — моя личка для вас открыта.

Это примеры from the top of my head, буквально с лета. Кое-что я даже нарочно опустил, потому что в итоге не воспользовался предложенной помощью.

Вообще мне помогали и некоторые "звезды" из java мира, и известные и не очень математики, и даже один профессор квантовой физики из США, который стал заниматься распределенными системами, и которого я просто нашел в твиттере.

Вот эти все вещи работают и в другую сторону. Некоторых я рекомендую на работу, не всегда даже к себе, многим могу сам что-то подсказать, благо знаний о том, где что искать и кого можно спросить у меня предостаточно по многим вопросам. Осенью вот закинул резюмеху своего препа из ЦМФ к нам. Больше всего, конечно, помогаю своим бывшим студентам, потому что они не боятся спрашивать.
Многие люди готовы помогать. Просто нужно быть вежливым, не забывать, что они тебе ничего не должны, и достаточно смелым, чтобы написать первым.

Вечером буду созваниваться со своим другом физиком Солнца, который сейчас контрактор NASA. Что спросить интересного?

Шалость удалась

Люблю иногда поиграть в спекулянта. Когда вижу что-то прям strong long, ищу свободные 15к рублей (или эквивалент). Закупаю и ставлю тейк-профит на 15% прибыли. В этот раз сток возвращался на такой уровень две недели.
Деньги не шибко серьезные (2к рублей), но удовлетворить жажду азарта и собственное эго хватает. Пока два раза проворачивал с Яндексом и вот теперь с твиттером. Когда был Тинькофф, не нашёл свободных денежек, к сожалению.

Со мной поделились ссылочкой на кучу бесплатных книг (научпоп). Хотя я к научпопу отношусь скептически, сам, конечно, потребляю. Наименее вредными считаю потребление научпопа именно через книги.

Кнопочка "скачать всё" может работать плохо.
https://vsenauka.ru/knigi/besplatnyie-knigi.html

Вы спрашивали про гелиофизику, а я нагло ничего не ответил. Исправляюсь.
Прежде всего, оказалось, что мой товарищ с январе больше не работает на NASA, а теперь уважаемый человек — профессор в теплой части восточного побережья. Однако, насколько я его понял, данные, оборудование, вычислительные мощности, доступные ему, как гелио-физику, примерно те же. Да и задачи похожие.

Прежде всего — данных много. Он пользуется данными Wilcox Solar Observatory. Местный телескоп генерирует примерно 50мегаБАЙТ в секунду. Это снимки в разных спектрах 4к х 4к точек.
Но, спойлер — никаких крутых IT решений здесь нет. Можете запросить данные вот здесь https://wso.stanford.edu/ и вам дадут ссылку на zip файл, с нужными данными.
Есть и классические тяжелые вычисления. Это наши любимые урматы, гоняемые на CPU кластерах, считают уравнения сноса, магнитогидростатики, диффузии и т.д. Это всё нужно для моделирования пятен, вспышек и электромагнитной активности.
Кроме такого классического подхода, мой друг продвигает ML. Для этого нужно гораздо меньше вычислительных мощностей (он все делает в питончике на своем ноуте), нужно только вытаскивать фичи из картинок. Можно, наверное и нейросеть на них натравить, но тут уж лучше взять GPU-кластер (напоминаю, картинки 4к х 4к каждую секунду), такое он не пробовал. Тут важно, какую задачу он решает. Для астронавтов критически важно , — буквально вопрос жизни и смерти — чтобы они не попали под выброс радиации, когда, например, собираются выйти в открытый космос. То есть нужно решать задачу прогнозирования, причем false positives вполне терпимы, а вот false negatives...сами понимаете.

Поболтали бодро и интересно, а потом он пошел разрабатывать курс гелиофизики для студентов, которые пока не знают, что такое вектор. Пожелаем ему удачи.

Сегодня у меня для вас просто интересная ссылка.
Оказывается, на заре страны советов существовала теория "стакана воды", согласно которой заниматься сексом должно быть так же просто и естественно, как выпить стакан воды. Нет, вы скорее всего не поняли. Предполагалось, что при коммунизме всё общее: еда, нефть, автомобили, жены и дети. Дети должны воспитываться в коммуне, а не в семье, здравствуй, детский сад. Жить надо в коммуналках, причём в идеале без кухни, чтобы кушать в _общественной_ столовой. Даже есть проекты таких домов, недавно в Москве реставрировать начали. Ну а раз дети общие, жильё и вещи тоже общие, готовить дома не надо, то семья не нужна, а жены и мужья могут быть общими.
Но дедушка Ленин не одобрил, причём, провел довольно точную аналогию, чтобы пояснить свою мысль (такое не часто встретишь): вряд ли вы захотите пить из стакана, к которому уже прильнуло с десяток губ.
https://ru.m.wikipedia.org/wiki/%D0%A2%D0%B5%D0%BE%D1%80%D0%B8%D1%8F_%D1%81%D1%82%D0%B0%D0%BA%D0%B0%D0%BD%D0%B0_%D0%B2%D0%BE%D0%B4%D1%8B

Про gamestop и прочие melvin'ы

Вчера услышал, что реддиторы HODL, потому что покупать уже не на что. И увидел, что мало кому понятен смысл такой стратегии. Нарисовал пальцем уродскую картинку и попробовал объяснить.

Напоминаю ситуацию. У крупных хедж-фондов открыты короткие позиции по акциям компании Gamestop. Короткие позиции это когда одолжил и продал, но обещал потом выкупить и вернуть.
Какие-то умные чуваки на Reddit прознали, что коротких позиций слишком много и начали коллективно скупать акции компании Gamestop. Идея была в том, чтобы задрать цену акций так, чтобы брокер выдвинул хедж-фондам маржин колл (требование о пополнении обеспечения), у фондов тогда не хватит свободных денег и они вынуждены будут купить акции по высокой цене, чтобы закрыть свои короткие позиции, тем самым вызвав ещё больший рост стоимости акций. Это называется short squeeze (short это короткая полиция).
Но у реддиторов денег мало, а у хедж-фондов много. Поэтому господа спекулянты решили "взять плечо", купив (длинная позиция, long) опционов call на акции. Продавцам таких опционов нужно покупать акции, чтобы закрывать свои риски, за счёт этого цену давили вверх.
Теперь у реддиторов лонг колл опционная позиция.
Это значит, что есть кто-то, кто шорт эти же самые колл опционы.
Если реддит держит опционы до экспирации,то продавцы опционов начинают покупать акции, цены растут, хедж-фонды несут деньги на маржин аккаунт или закрывают короткие позиции. Теперь о том, почему простое ожидание приводит к тому, что продавцы опционов будут покупать акции.

Вот график pnl покупателя колл опциона (для продавца оранжевая клюшка отражается относительно оси абсцисс).
Ордината -- pnl, абсцисса -- текущий курс акций S, K -- это страйк -- цена, по которой держатель опциона может выкупить акции у продавца в день экспирации.
Оранжевый график это график pnl покупателя опциона _в момент экспирации_.
Жёлтый график это какой-то момент до экспирации.
С течением времени жёлтый график постепенно ложится на/прижимается к оранжевому.

Теперь главное.
Смотришь, где сейчас находится курс, скажем, где зелёная вертикальная черта, не важно, главное, что правее K. На пересечении зелёной и жёлтой смотришь производную (тангенс угла наклона касательной к жёлтому графику в этой точке). Это называется дельта -- чувствительность стоимости опциона к движению курса.
Чтобы не обосраться, надо эту дельту хеджировать (положительную продавать, отрицательную покупать).
То есть, если ты продавец опциона, то у тебя на зелёной линии отрицательная дельта, значит, надо купить акций. В количестве, пропорциональном абсолютному значению дельты.

Теперь, напоминаю, жёлтый график прижимается к оранжевому, а значит, угол касательной становится больше, дельта растёт (в абсолютном выражении) со временем. И продавец опциона должен докупать акции с течением времени. В этом смысл HODL.

Вопрос в том, что, как видно из графиков, чем дальше K от текущего курса, тем меньшее значение для величины дельты имеет как течение времени, так и движение курса.
Так что если все опционы были проданы по далёким страйкам, то чуда не случится.

Возвращаясь к идеям коммунизма

В 1850 году в Китае началось тайпинское восстание. Хун Сюцуань не смог сдать экзамены на чиновника, перенервничал. Это наложилось на прочтённые им христианские трактаты, которые в то время активно впихивали всем грамотным китайцам мессионеры. В результате было Хун Сюцуаню откровение: приходили к нему два бородатых мужика, -- один беловолосый, второй черноволосый, -- говорили на непонятном языке. Хун Сюцуань тогда понял, что это были Бог-Отец и Иисус, а сам он -- младший брат Иисуса, третья деталь святой Троицы.
Красиво объединив христианские мотивы с традиционными древними китайскими легендами, а также с лютой ненавистью к конфуцианству и манчжурам, вызванными действиями тогдашней власти (династия Цин -- этнические манчжуры), Хун Сюцуань смог привлечь в свою религию довольно много людей. Из оказалось достаточно даже для восстания и успешного сопротивления регулярной государственной армии. На пике движения некоторые источники говорят о 100 миллионах участников и сочувствующих тайпинам (население Китая в то время составляло около 400 миллионов человек).

Интересны идеалогические аспекты движения. Землю делили не поровну, а честно, всё, что хозяйство произвело сверх необходимого для выживания сдавалось в "общак", из которого кормили голодных. Создавались детские дома, дома престарелых, поощрялось усыновление и, особенно, удочерение богатыми семьями детей из бедных семей. Женщинам давали права, равные правам мужчин. Дети должны выживать, потому что это ресурс -- люди, которые будут платить налоги. Где-то я встречал и теорию об общих детях, не принадлежащих семье, но кросс-ссылками это не подтверждается.
На время военных действий, впрочем, браки и вступление в сексуальную связь были запрещены. Женщины и мужчины жили отдельно и образовывали мужские и женские отряды. С кем жили дети, я не понял 😁.

Мао позже утверждал, что коммунизм, как идея, зародился именно в Китае, указывая на то, что Маркс был знаком с идеями тайпинов.

Восстание же было с трудом подавлено. В результате него погибло 20-30 миллионов человек. Это крупнейшая гражданская война в истории и крупнейшая война 19 века.

Я думаю, что Хун Сюцуань не смог победить, потому что он Хун, а не Хуан. (Кто не понял, тот поймёт)

А если вам интересно почитать про успешный вариант второго пришествия Иисуса в лице азиата, то вот вам прекрасная статья на Вики о Мун Сон Мён.
https://ru.m.wikipedia.org/wiki/%D0%9C%D1%83%D0%BD_%D0%A1%D0%BE%D0%BD_%D0%9C%D1%91%D0%BD

Помнится, я обещал выложить ссылочку на материалы по философии, истории и методологии науки. Наконец-то я собрался, оформил список, загрузил недостающие источники и даже написал своему аспирантскому семинаристу, потому что кое-что уже и подзабыл.

Кому будет интересно?
Тем, кто не изучал этот предмет, но интересуется ноучной ноукой или даже мнит себя крутым рационалистом, безропотным преспешником церкви имени Карла Поппера.

Что внутри?
А внутри мануал по вкатыванию в философию, историю и методологию науки! Мануал состоит из оригинальных статей и книг хайповых философов науки (статьи прилагаются!), расположенных в таком порядке, чтобы можно было заметить, как они перекликаются, дискутируют и критикуют друг друга сквозь века.
Поппер, Фейерабенд, Пуанкаре, Латур и другие представят вам свои точки зрения напрямую, без интерпретаций всяких популяризаторов. Вы сможете обдумать вопросы познания и науки с огромного количества углов зрения и составить свое собственное мнение.

https://drive.google.com/drive/folders/1e8WgRblve1hUbKl_8P4TU5E3InAPpgC8?usp=sharing

P.S.: Я не учёный, мой вклад науку ограничен магистерской со скорее отрицательным результатом. Но и мне было офигенно интересно изучать эти материалы и по-новому смотреть на то, чему меня учили в институте, и чем, а главное как, мы занимались во ФТИАН.