​Довольно интересную демку, но увы, пока, не играбельную показала Nvidia. На гифке ниже – простой автомобильный симулятор, в котором можно перемещаться по городу, сгенерированному нейронкой. Графика в демке сделана при комбинировании технологий Unreal Engine 4 и нейронки которая превращает размеченные зоны в изображение похожее на реальную улицу.

Я как-то уже уже писал про подобную нейрокну, вот тут можно почитать.

Даже боюсь представить требования к такой игре

Я как-то уже писал о перспективном использовании AR в плане «примерки» обуви, так вот наконец-то кто-то занялся и запилил AR-демку которую можно потестировать самому на iOS – сделал видео с демо-технологией:
https://youtu.be/qaLKI9rkwLo

Приложения пока нет в AppStore, насколько я понял, ребята все еще обкатывают технологию и обучают нейронку, но поиграться уже можно самому тут:
https://testflight.apple.com/join/TOPQxoP8

(Для установки демки, должен быть установлен TestFlight)

P.S. Если это важно, то на носочках текстура с мопсами <3

Ура, еще на шаг ближе к вселенной Гарри Поттера – в видео ниже вы можете посмотреть пример алгоритма который оживляет фотографии. Просто смотрите на объект, а он "выбегает" из фотографии.

По ссылке под видео есть детали, а также более подробное описание алгоритма.
Кстати, эта штука делается сразу с учетом AR-очков 🔥

"Making photos alive"
🔎 grail.cs.washington.edu/projects/wakeup
📉 @loss_function_porn

​Кажется, я что-то пропустил – когда аниматроники стали такими офигенными? Вы только посмотрите на Красавицу и Чудовища из строящегося Диснейленда в Токио, какие эмоции на лице, какие мягкие движения, это же всё выглядит как графика.

Полное видео:
https://youtu.be/bJtNxaTwgz0

А бонусом, еще один аниматроник - из вселенной фильма «Аватар»:
https://youtu.be/_p4mn5BstQo

Резко захотелось в Диснейленд, мне ведь как раз 30, самое время

В Японии, на пару недель (в бета режиме) заработало кафе в котором официантами работают люди с ограниченными возможностями, точнее – обслуживают гостей роботы, а вот операторы этих роботов – люди почти полностью парализованные.

Управление роботом происходит с помощью «взгляда» на нужную кнопку у пациента дома, где также установлено дополнительное оборудование.

В статье про проект есть довольно много видео, включая то, как происходит управление роботом:
https://nextshark.com/japan-cafe-paralyzed-robot-servers/

Помимо того, что каждый оператор получает какую-то активность позволяющую ему выбраться за пределы дома, увидеть новых людей и тп, оператор также получает возможность заработать ~ 9$ в час (обычная ставка за парт-тайм работу в Японии).

Если все пройдет хорошо, то полноценно такое кафе заработает в 2020 году.

Ох уж эти Японцы, как же далеко они в будущем относительно всех нас

Наша портфельная компания Mubert запустила новую веб-версию с новыми жанрами и кейсами использования. Напомню, это единственный в мире проект фоновой музыки, генерируемой алгоритмами, который реально работает в вебе и мобайле. #новостипортфолио

https://mubert.com/

"Comixify: transform any video into a comics"
🔎 comixify.ii.pw.edu.pl
📉 @loss_function_porn

Нашел на Reddit классный мануал, как раз под новый год, для родителей которые хотели бы детям показать «Деда мороза», точнее то, как он по небу куда-то там едет по своим праздничным делам.

Международная космическая станция облетает вокруг земли 15 раз в сутки, поэтому при небольшой подготовке ее можно наблюдать на небе в течение нескольких минут, без телескопа и всякого такого:

1) Необязательный пункт – нужно найти какое-то темное небо (без светового шума) близкое к вам через этот сайт: https://darksitefinder.com

Даже если чистого темного неба рядом нет (Привет, Москва), то не страшно, МКС достаточно яркая чтобы заметить ее даже в московском небе, даже днем (в комментариях так пишут).

2) На этом сайте, вы можете указать где вы находитесь и он покажет где именно лучше наблюдать МКС и в какое время. Вот Москва, например.

Еще есть приложения под iOS и Android где можно сделать тоже самое и даже в дополненной реальности увидеть где сейчас МКС.

3) Сложная часть – теперь, за пару дней до пролета над вами МКС, попробуйте понять будет ли видно МКС за облаками. Это можно сделать на этой карте (нужно кликнуть нам место где вы будете и покажется прогноз облачности).

Как-то так, пару простых шагов и ваш ребенок еще больше поверит в какое-то новогоднее чудо 🎄

​Вы много раз выигрывали в эту (мою любимую) рубрику, посмотрим что будет в этот раз – люди на фото, они настоящие (не сгенерированные алгоритмами)?

🔥 Я даже не могу описать насколько феноменально хорошо работает этот алгоритм: фото выше результат работы GAN-нейронки которую показала Nvidia – все эти люди, сгенерированны нейронной сетью.

Просто посмотрите видео, там прекрасно видно, что эпоха нейронных фейков, генеративных gamedev-движков, GAN-актеров (?), GAN-фотостоков (??) и я даже не знаю чего еще, вот-вот начнется, буквально пару лет осталось подождать и мы в каком-то новом измерении:
https://youtu.be/kSLJriaOumA?t=30

Видео начинается с того, как фотографии некоторых людей стилизуют под других, то есть алгоритм – не только умеет генерировать людей, он умеет намного больше, включая смену внешности «ползунками» настроек.

Вот тут детали работы алгоритма:
https://arxiv.org/pdf/1812.04948.pdf

Алгоритм получает 10 эмодзи огоньков из 10.

​Не смог удержаться, и нарезал видео выше на гифки – так, нейронная сеть из датасета с котятами генерирует котят 🐱

​А так, применяет стиль одной машины к другой 🚙

ИТ-гиганты часто создают алгоритмы, которые работают «для всех» — не учитывая ваши жизненные обстоятельства, но учитывая ваши интересы. Иногда это становится проблемой. Мое мнение таково, что с одной стороны, большинство алгоритмов в соцсеточках делают довольно молодые и веселые ребята, которые не думают о каких-то негативных последствиях или исходах у конкретных пользователей, а с другой, почти всегда потом в бизнес приходит большая ИТ-компания и просто забивает на тех несчастных до того момента, пока их не наберется критическая масса.

Наткнулся сейчас в Твиттере на открытое письмо девушки, которая потеряла ребенка во время беременности — тяжелое и трогательное письмо, с личной драмой, суть которой сводится к тому, что алгоритмы Амазона, Твиттера, Фейсбука и т.п. смогли понять, что девушка беременна. Все связанные рекламные баннеры, которую сопровождали девушку, предложения купить товары, что угодно, все было на тему того, что она вот-вот станет матерью. Алгоритмы поняли это по поведению женщины, по тому, что она писала и что добавляла в корзину.

Теперь она буквально не может пользоваться интернетом, потому что «выныривая» из текущего состояния в интернет, чтобы отвлечься, ей постоянно показывают рекламу товаров для беременных.

Самое плохое в этом то, что нажимая «Мне это не интересно» у каждой рекламы, алгоритмы начинают думать, что ей не интересно, потому что она успешно родила, и начинают рекомендовать товары на основе этого предположения.

Получается, вся интернет-жизнь человека, все эти сотни рекламных трекеров теперь постоянно ей напоминают о том, что она пытается пережить и забыть.

Я знаю, что канал читают ИТ-менеджеры, ML-инженеры и разработчики из разных сфер, поэтому чувствую, что важно по-дружески тут написать, чтобы вы всегда понимали разные грани решений, которые вы выкатываете в продакшн, потому что об этой теме мало кто говорит в целом, но за каждой такой ошибкой рекомендательной системы скрывается действительно несчастный, страдающий пользователь.

Открытое письмо:
https://twitter.com/gbrockell/status/1072589687489998848

Довольно сложно удивить кого-то музыкой исполненной на флоппи-дисках, принтере, жестком диске, катушке тесла и тп, всякое мы уже слушали в этой области.

Спасибо инженерам из Кливленда за новый рывок – теперь к списку музыкальных инструментов инженеров добавился МРТ-аппарат который перепрограммировали для того, чтобы его катушки (генерирующее магнитное поле) могли сыграть Баха в исполнении Yo Yo Ma.

Звучит дорого и даже лучше чем я ожидал, а самое интересное – что формально, этот МРТ-аппарат все еще способен делать «Нормальное» сканирование, даже с музыкой из магнитных полей.

https://youtu.be/VYAvxe9X3s0

Как видите, перед новым годом у всех полно дел ¯\_(ツ)_/¯

Прикольный сервис: ИИ распознаёт на фото объект и удаляет фон. Просто, удобно, бесплатно. Try it: https://www.remove.bg/

P.S. Гарантированно работает с фотографиями людей, для других объектов надо тестить.

​Пару дней назад общались с коллегами по поводу GAN нейронных сетей (Что такое GAN на примере Prisma) и коллеги задали вопрос, а где можно использовать такую архитектуру нейронной сети и кому вообще это может быть нужно?

Мне кажется это интересным вопросом, и хороший повод подвести какие-то GAN-итоги-2018, поэтому я соберу тут те алгоритмы которые я встречал, ссылок будет много, но вроде все хорошие.

Важно сказать, что пока что больше всего исследований вокруг GAN связано с какими-то визуальными эффектами, хотя такие нейронки могут генерировать прекрасную музыку уже сейчас.

GAN-нейронки позволяют генерировать картинки разных стилей художников, создавать видео, генерировать объекты которые вообще не существует (вроде лиц тут), дорисовывать фото "улучшая" фото – например, если у вас селфи так себе, то нейронка уберет морщинки, добавит улыбку, сделает фото "лайкабельным" или просто улучшит качество изображения, а самое главное – все это в высоком разрешении.

Или, к примеру, отдаете нейронной сети книгу, а на выходе она рисует картинку для каждой сцены, что есть в книге – превращая текст в картинки.

Само собой, такая доступность технологии означает, что 2019 году нас ждет еще больше дипфейков всех видов, последний раз я собрал их тут, если у вас есть классные – кидайте мне в личку, я всегда рад.

GAN позволяет генерировать любые объекты если у вас есть достаточно данных – от аниме персонажей, текстур, 3D-моделей из 2D-фото, до смены поз на фотографиях.

Самое странное, и мало изученное – что GAN-нейронная сеть может смешивать "классы" этих объектов – что из этого выйдет, мы пока не знаем.

В общем, это был очень богатый год на различные исследования, конечно в одном посте нельзя перечислить все, что понравилось –мое мнение такое, что GAN-тенденции одни из самых перспективных в IT на следующие несколько лет.

Кстати, если вы не так давно подписались на канал, и вам интересно, как работает нейронная сеть в целом, то вот прекрасное и понятное видео из 2х частей которое все расскажет.

#итоги2018

​До нового года серьезных постов видимо не будет, наткнулся на классный проект Doomba:
https://dtf.ru/35188

Если у вас есть робот-пылесос Roomba то вы можете его запрограммировать сделать карту для Doom 1 просто пропылесосив вашу квартиру.

Робот убираясь строит 3D-карту местности, а дальше скрипт конвертирует это все в игровую карту ¯\_(ツ)_/¯

​Не так давно была новость, что в Netflix вышла Minecraft Story – интерактивная игра, где как в обычной игре, вы сами участвуете в сюжете и от этого зависит то, что будет происходить дальше.

Если совсем на пальцах объяснять – помните как работали системные меню DVD дисков? Вы выбираете какой-то пункт, в зависимости от этого проигрывается определенный файл на диске, ничего необычного.

Так вот, Netflix сейчас работает примерно так же, я "поиграл" в Minecraft Story, и как человек любящий игры вроде "Detroit: become human" для PS4, где ты нажимаешь крестик и смотришь игровое кино, могу сказать что это довольно клевый формат – я "играл" на iPad, выбирал дальнейшие шаги героев, на экране что-то происходило, меня спрашивали что делать дальше. Не знай я что это все видео, я бы мог подумать что весь Minecraft Story такой – я ради интереса скачал его на PS4 и он там в похожем формате, кнопки правда сделаны "нативнее" и сюжет совсем другой.

Но я не об этом, на Netflix вышел такой же фильм по вселенной "Черного зеркала" – там такая же механика, я еще не смотрел, но думаю будет клево.

Русские сабы присутствуют.

Тут подробнее:
https://tjournal.ru/83185

Мне нравится думать что Netflix может стать игровой консолью таких вот игр, люблю интерактив ԅ(≖‿≖ԅ)

Посмотрел, интерактивный фильм, горячо рекомендую — Netflix молодцы, создают формат который пока нельзя спиратить 🏴‍☠️.

В фильме иногда весело, и не скучно, и актеры классные, в общем — 5 эмодзи из 5.

Небольшой совет если будете смотреть сами — когда в конце будут диктовать номер телефона, отнеситесь к сцене внимательно, я ошибся и придется переигрывать теперь, вдруг там что-то интересное.

UPD. Номер 20541

Не хочется писать банальности, но сложно придумать что-то лучше, чем просто «Спасибо» – спасибо вам за то, что вы читаете канал, даете обратную связь или просто делитесь чем-то интересным с автором канала. Спасибо (✿◠‿◠)!

С наступающим новым годом, 2019 год по моим ожиданием еще больше порадует нас новыми алгоритмами ML и всевозможной автоматизацией – это вообще универсальный прогноз, я активно жду повсеместное внедрение нейроночек.

https://youtu.be/RDZu04v7_hc?t=0m6s