Я приехал из Америки неделю назад, но решил взять немного времени на осмысление, прежде чем написать свою Аналитику. Рассказываю на карточках.

Что произошло?

Хотел поработать в Калифорнийском Стартапе, грезил Калифорнией, вел Калифорнийский Инстаграм. А сам-то в Калифорнии не был!

Артем обратил внимание на то, что моя туристическая виза истекает, новые не выдают, а на небе только и говорят что о Калифорнии. Было принято Решение ехать.

А что там в Америке?

За две недели побывали довольно много где: Нью-Йорк -> Филадельфия -> Пуэрто-Рико (это какая-то колония короче остров) -> Орландо (это во Флориде) -> Лас-Вегас -> Лос-Анджелес -> Сан-Франциско -> Нью-Йорк.

Ел настоящую америанскую кухню, пил американо блин, смолтолкался с нэйтив спикерами и эмигрантами, спал в самолетах, поездах и в тачке, купался в море, обгорел, сходил в парк развлечений, фоткался со всем подряд. Посмотрел на Калифорнию своими глазами! И работал на удаленке еще параллельно =)

Ну и что?

Очень хотелось посмотреть самому и дополнить свою картину мира. В детстве смотришь голливудские фильмы, потом видишь как люди уезжают Туда, читаешь как Там создаются Вещи. Тем более, так сложно получить визу – значит там настолько круто что таких как я туда не пускают. Создается ощущение идеального и недостижимого. И хоть мозгом понимаешь, что картинка неадекватная, но веришь всё равно.

Америка оч похожа на Россию на самом деле, такая чисто Россия без Путина. Огромная империя, половина страны не заселена, большое расслоение, большая разница между демократами и республиканцами (а у нас – оппозиционеры и ватники). Мне показалось, что самая большая разница в том, что у местных нет ощущения забитости, вторичности. Смотришь на то, как всё чистенько на фермах, на организацию всяких там нацпарков, и кажется что разница как будто даже не в деньгах, а в отношении к тому что вокруг тебя, какая-то вера в то что это твоё, а значит надо держать это в порядке.

Города очень похожи на то, как в моем воображении должны выглядеть 80е. Лас-Вегас наверное как 60е. Видимо тогда был расцвет их цивилизации, который машины навсегда запечатлели в Матрице. И теперь каждый раз воспроизводят при перезагрузке.

Знал что еда будет невкусной, что везде гамбургеры, тяжелая жирная еда. Ну в общем-то да, я прям подорвал пищеварение, залечил только уже на Брайтон-Бич, бахнув борща.

Очень боялся за язык. Раньше я почти никогда не общался с нейтивами, и у меня было ощущение, что я знаю какой-то ненастоящий английский. Что настоящие нейтивы будут говорить на неразборчивом и переспрашивать то что я им отвечаю. На уроках английского пугают: “ууу, а вот в Америке даже северяне не понимают что говорят южане, а есть рэднеки которые вообще хер поймешь”. Оказывается, большинство людей нормально понятно разговаривает) Бомжи непонятно разговаривают иногда, но особо и не надо. Формулировать мысли быстро на английском у меня не получается, но мне их и на русском формулировать сложно есчестно

Калифорнийская ли Калифорния?

Не-а.

1/ Бесконечные таунхаусы, города, перетекающие друг в друга. Я не очень понимаю такие пространства, не понимаю, как этим пользоваться, не могу прочувствовать. Осознание не умеет мчаться как электричка, тем более как тачка. Не знаю как объяснить, но осталось ощущение, что я не прочувстовал суть городов здесь. Похожее ощущение было в Дубай: город для тачек, где игроделы прорисовали только несколько зданий, а в остальные зайти нельзя – двери не открываются.

2/ Калифорния – самый закрытый на карантин штат из всех, где мы были. Хотя казалось бы непонятно как при такой плотности населения они вообще могут заражаться. Я укрепился в мысли, что в целом ковид – это лучшая находка для армии чиновников, которые хотят принимать Меры. Например, почему бы не сделать проезд в нацпарки по записи, ведь в лесу людей обычно столько, что невозможно соблюдать дистанцию в 6 футов.

3/ В Лос-Анджелесе реально нечего смотреть. Знак Голливуд, аллея со звездами, виды как в гта, ну и всё. Но честно говоря в Сан-Франциско тоже не то чтобы было что посмотреть. Ну, мост)

4/ Не нашли приличную еду, нашли более-менее приличный кофе, даже авокадо по пути не получилось зацепить. Надо наверное было целенаправленно знать места, но так я и в Москве могу. Я представлял какой-то SOTA сервис, какие-то угарные штуки, до которых мы тут в России еще не доросли. Ну типа йога на каждом углу, авокадо боул, реклама про коучей по кето-диете я не знаю) Даже вот смотришь – билборд про психологические темы. Думаешь – ну наверное это про подбор психолога, а что довольно калифорнийская тема. Присматриваешься – а это про гадание по руке

5/ То есть литерали деревня, посередине стоит Apple Park, но зайти туда нельзя и сверху посмотреть неоткуда. Приезжаешь в Visitor Center, тебе говорят – вот смотри у нас тут обычный эплстор, можешь посмотреть. Но только снаружи, потому что корона)))

6/ Видимо, Калифорния – это прежде всего люди. Невероятный нетворк, где ты выходишь на правильных людей, которые помогают твоему бизнесу. Эта область для меня так и осталась покрыта туманом войны, потому что корона и потому что я не предприниматель. Буду еще разбираться.

7/ Как пространство мне Нью-Йорк понравился гораздо больше. Это понятный нормальный город, где есть общественный транспорт, где алкаши и голые гитаристы тусят на Таймс-сквер и чувствуется жизнь. Всё плотно расположено и можно ходить пешком. Но Нью-Йорк кажется устаревшим по сравнению с той же Москвой. Ну и он даже не в Калифорнии, так что тем более не считается

Мысли о России

* В Москве реально есть всё, это оч крутой город для жизни и для работы

* Даже непонятно как будто, почему тогда все Айфоны придумывают Там, а не у нас

* Но на самом деле понятно, почему.

* И в общем-то это немного грустно. Россия начинала очень бодро развиваться после развала совка, но после 2014 мы – это такой медвежий угол, про который никто особо и не знает. А ведь у нас огромный потенциал. В Москве можно заказать что угодно 24/7, вкусная еда, офигенный кофе, кальяны, куча специалистов, дешевая рабочая сила. В стране очень крутая природа, есть классные необычные города, можно было бы развить очень сильный туризм. Но душат(

* В России никто из больших контор не умеет делать продукты на внешний рынок. У стартапов работает такая схема – руководство сидит в долине, а разработка ведется в России. В целом, это кажется мне очень патриотичным, и возможно самым важным делом сейчас: связывать долину, её нетворк и деньги, с разрабами из России. Наверное, это то, чем я хотел бы заниматься. Не знаю пока правда в какой роли.

* Хочу ли я уехать туда? Нууууу сложно сказать. Больше никакого пиетета, никаких ожиданий, никакой зависти. Если будет рационально туда ехать (напрмер, закончится интересная работа в России) – то ок, поеду с кайфом. Какая по-большому счету разница, где сидеть за компом.

Написал утилиту для раскидывания gpu-heavy задачек равномерно по видюхам: GPUParallel

Эта штука создает воркеры по числу видеокарт, в каждом из них инициализирует нужные сетки, а потом раскидывает по воркерам задачки до тех пор, пока они не кончатся.

Зачем?
Вот например есть массив картинок, его надо прогнать через говнокод из сеток на серваке из 16 видюх. Раньше я бы побил датасет на 16 чанков и запустил 16 процессов с CUDA_VISIBLE_DEVICES={idx}. А теперь можно просто закинуть список из имен файлов в приблуду и она будет освободившимся воркерам новые задачки закидывать. Красота ведь!

Или вот другой случай. Нужно прогнать dlib на датасете, но если его объявить до создания воркеров, то память будет течь. Выходит, нужно каждый раз создавать детектор в каждой задаче заново, а ведь это огромный оверхед! Правильно было бы создавать детектор один раз при ините воркера, а не в таске, но тот же joblib такой возможности не дает (а моя штука именно так и делает если что!)

Поставьте звезд, если не жалко!
🌐 https://github.com/vlivashkin/gpu_parallel

Интересно было бы на видео посмотреть, в частности — на соотношение сторон =)

Моя команда сегодня открыла бета-доступ к text2video платформе Visper 🎉
📝 habr.com/ru/company/sberdevices/news/t/554402
🌐 visper.tech

Сбер тоже выкатил свою платформу для генерации видео-дикторов, можно поиграться тут:
https://visper.tech

Все как обычно: вы пишите текст, его читает робот и генерирует видео 🙋🏻‍♀️

> It requires little to no work, it is fun. You get to see numbers on your computer screen change and it feels like you are learning something and making progress.

> This is a mirage.

((((((((((((

medium.com/hackernoon/doing-machine-learning-efficiently-8ba9d9bc679d

В порыве прокрастинации собрал из всех своих умных устройств дашборд на основе Home Assistant. Хощу его дома на Jetson Nano, это аналог Raspberry Pi.

Мои устройства: робот-пылесос, фильтр для воздуха, датчик CO2, чайник который нельзя включать из приложения и две розетки. Раньше я ими пользовался через Mi Home и HomeKit, но теперь у меня есть ГрАфИкИ! Можно например смотреть, как в течение дня меняется температура в квартире от температуры на улице или как меняется уровень CO2 от количества гостей дома)) Красиво конечно, но зачем)))

Оказывается, устройства шерят больше информации, чем можно было подумать. Например мой роутер без авторизации шлет в локальную сеть, сколько пакетов он сейчас передает. Принтер (!) передает в локальную сеть статус, что он ничего не делает. Телефоны раз в полчаса передают свои координаты и заряд батареи каждому, кто получил токен от iCloud.

Можно ли извлечь из этого пользу? Из автоматизаций у меня только включается свет с утра перед будильником, и непонятно что можно еще накрутить. Сделать электромотор, который будет открывать форточку когда душно?) Включать розеткой обогреватель, когда становится холодно?) Это уже пожалуй следующий уровень шизофрении блин)

а теперь — реджект этой же статьи на KDD

поразбирался, как работает майнинг и Proof-of-work в Etherium:
* блокчейн состоит из транзакций, которые объединяются в блоки. пока новая транзакция не объединена в блок — она не считается совершённой
* когда пользователь хочет перевести деньги — он создает транзакцию. транзакция стоит денег, которые получит майнер, который сможет положить эту транзакцию в блок. пользователь рассылает свою транзакцию всем майнерам
* майнер знает про все новые транзакции, в какой-то момент когда сумма денег за эти транзакции превышает ожидаемые затраты на майнинг то он решается создать из всех них новый блок
* тогда он начинает считать сложную бесполезную задачу на основе данных об этих транзакциях. задачу сложно решить, но легко проверить ответ. если он успеет быстрее всех, то создает новый блок и рассылает его всем майнерам, они перепроверяют этот блок, добавляют его к себе и удаляют единичные транзакции, которые теперь уже вошли в блок
* если он не успеет и блок создаст кто-то другой — то придется выбрасывать все насчитанное, выбрасывать транзакции и еще и забесплатно проверять чужой блок
* это все нужно для того, чтобы злоумышленник охренел при попытке подсунуть нечестный блок где он забирает все деньги

ну и еще, насколько я понимаю:
* у одного майнера нет шансов угадать ответ на своей ферме, поэтому на самом деле блоки создают майнинг пулы, а майнеры с фермами получают долю, пропорциональную своему железу
* эфир пугает, что в конце года заменит Proof-of-work на Proof-of-stake и видюхи подешевеют. если раньше право создавать блок предоставлялось тому, кто быстрее решит задачу, то теперь право подписать блок будет предоставляться любой случайной ноде, у которой есть на счету 32 ETH (это 5.6М рублей сейчас)

Выступаю сегодня на CG Event, буду расссказывать про то, как работает генерация говорящего персонажа у нас в проде Visper. Там предзаписанные видео, записывал ночью, выгляжу ужасно, но по контенту вроде доступно и интересно получилось. Если вдруг покупали билет – приходите, 16:00, сцена 3.

не судите строго!

Тем временем мы с @ploshkin выкатили новый пайплайн генерации и нового персонажа в Visper! Теперь есть база, чтобы растить качество (липсинка прежде всего) и впиливать фичи.