Метаверс с начала 2021 года привлек $177 млрд. Почему же графика такая отстойная?

Когда Meta* в середине августа запустила Horizon Worlds во Франции и Испании, весь интернет взорвался смехом. Насмехаться начали над «мертвоглазым» и безногим мультяшным аватаром генерального директора Марка Цукерберга, что вынудило компанию его быстро переделывать.

По мнению автора статьи на Decrypt, причин может быть огромное количество, но основные две звучат так:

🟣 Отсутствие вычислительных мощностей
Для рендеринга графики в реальном времени требуется большая вычислительная мощность и сверхскоростной интернет, который не всегда доступен пользователям.

🟣 Так проще скрывать недостатки
Разработчики сознательно выбирают мультяшный стиль, так как с его помощью легче скрывать недостатки и быстро их исправлять, чем с фотореалистичной графикой.

*Meta – запрещенная на территории РФ организация

Дорисованная DALL-E «Девушка с жемчужной серёжкой» Вермеера

Outpainting — новая фича нейронки.

Meta* научилась читать мысли

Исследователи из Meta AI создали решение, способное расшифровывать речь из мозговых лучей сигналов электромагнитной активности мозга.

Принцип такой: индивидуальные реакции вашего мозга на речь в течение нескольких секунд записываются с помощью ЭЭГ или МЭГ; эти данные загружаются в нейронку; а на выходе формируется алгоритм, способный расшифровать ваши мысли с точностью 73%.

Вспомните эту новость, когда вам будут рассказывать, что «эти датчики на ваших умных очках нужны для измерения пульса».

* — запрещенная на территории РФ организация

Ученые восстановили утерянную картину Ван Гога с помощью искусственного интеллекта и 3D-печати!

Два исследователя из Калифорнийского университета воспроизвели «потерянную» картину Ван Гога, поверх которой он нарисовал другое полотно 135 лет назад!

Они использовали рентгеновские лучи, чтобы рассмотреть утерянную картину под слоем красок, затем использовали ИИ-алгоритм для сохранения стиля художника и, наконец, с помощью 3D-печати создали физическую версию картины.

Работа получила название «Два борца», а нашли ее в 2012 году под картиной «Натюрморт с луговыми цветами и розами», когда подтверждали ее принадлежность кисти Ван Гога.

Августовский дайджест D. lab уже в эфире 🔥

Из него вы узнаете:

🟣 Как изменились доходы на рынке российских онлайн-кинотеатров

🟣 Как тратят рекламные бюджеты после ухода западных соцсетей из России

🟣 Куда перешли российские пользователи после ухода Spotify

🟣 Зачем YouTube запускает свой маркетплейс

🟣 Зачем Nvidia представила сервис по созданию виртуальных людей

И многое другое 💥

Уже 20 лет назад создавали боевые сцены с помощью ИИ

Битва при Хельмовой впадине из фильма «Властелин колец: Две башни» – первое кинематографическое сражение, созданное с помощью программы Massive. Ее разработали специально для «Властелина колец», чтобы создать компьютерную армию с использованием искусственного интеллекта для моделирования реалистичных сражений огромного масштаба.

Massive до сих пор используют во многих больших проектах, например, «Мстителях» и «Игре престолов», поэтому программа постоянно совершенствуется.

Например, в битве при Хельмовой впадине можно заметить, как разные персонажи повторяют одно и тоже движение, а уже в Мстителях алгоритм подбирает разные стили боя и разные движения для персонажа по отдельности (все зависит от его окружения). При этом сами персонажи не похожи друг на друга, потому что ИИ создает их уникальный вид.

Будущее интерфейса для редактирования и монтажа видео выглядит так ⚡️

Да, вы просто печатаете своё желание в окошке, а нейронка делает всю работу за вас и оооооооооочень быстро!

У ребят из Runway уже можно запросить доступ к бете и протестировать продукт.

Но на видео показан только концепт и до такого чудо-редактирования еще не скоро дойдет 😉

Stable Diffusion + EbSynth = мы в понедельник 😂

Один пользователь в Твиттере* опубликовал результат своего эксперимента, в котором он объединил нейронку (Stable Diffusion) и программу (EbSynth), которая стилизует видеоизображение.

* — запрещенная на территории РФ организация

Компания D-ID представила ИИ-приложение, которое создает виртуальных ведущих из фотографии 💥

Загружате фото и текст (или аудио), а на выходе получаете очень реалистичное видео говорящей головы. Предполагается, что Creative Reality Studio (так называется приложение) будет полезно при создании видеопрезентаций и лекций.

Пользователи, купившие платную версию, получают больше возможностей для кастомизации своего персонажа: более качественную и разнообразную мимику и движения рук 🙌

Сейчас покажем, каким может быть шоппинг с современными технологиями 👀

Диджитал художник и специалист по AR, Сергей Галкин, показал примерку одежды с помощью ИИ и голосового помощника.

Только посмотрите на скорость! За считанные секунда ИИ автоматически создает индивидуальный продукт для клиента. Очень круто!

Как думаете, когда все начнут так шопиться?

В Dall-E 2 разрешили редактировать человеческие лица 🤨

В начале недели OpenAI объявила, что клиенты, имеющие доступ к DALL-E 2, могут загружать лица людей, чтобы редактировать их с помощью системы генерирования изображений на основе ИИ.

Ранее эта функция тоже была доступна, но ее закрывали, чтобы успеть поработать над ее безопасностью и «минимизировать потенциальный ущерб» от попыток создания сексуального, политического и насильственного контента для людей.

Правда, пользователям пока что запрещено загружать фотографии без согласия того, кто на них изображен (только неясно, как они это будут проверять 🙃).

Генеративная революция только намечается 🚀

Генеративки уже поменяли «правила игры» в некоторых профессиях: иллюстратор, дизайнер, сценарист, vfx-дизайнер (ссылка раз, ссылка два) и многих других. Но полномасштабное внедрение этих технологий в профессиональные инструменты для создания компьютерной графики и производства контента только начинается! Вот несколько примеров:

🟣 Месяц назад один разработчик из DreamStudio сделал публикацию, в которой утверждает, что это первый прототип полноценной AI студии от Stable Diffusion и что такого скоро будет еще больше! На видео как раз показана работа в DreamStudio.

🟣 Потом выходят два приложения: Diffusion Bee и Charl-E. Они генерят ИИ-изображения на Mac с процессором M1 с помощью Stable Diffusion.

🟣 А еще до них в начале сентября Blender тестировал Stable Diffusion в качестве генератора текстур!

Ждем очередного витка революции в производстве контента!

Обнаружен слив личных медицинских данных в популярном датасете для обучения ИИ 🤬

Художница под ником «Lapine» обнаружила свои фото из медкарты в наборе изображений LAION-5B, на котором тренируют нейросети. Фото в 2013 году сделал лечащий врач. Художница нашла свои фотографии на сайте «Have I Been Trained», который помогает узнать авторам, использовался ли их контент для обучения нейросетей.

Во время поиска фотографий Lapine обнаружили тысячи похожих фотографий из медицинской карты пациента в датасете 🤯

На фотографиях не указано настоящее имя Lapine, но художницу беспокоит, что изображения были опубликованы без какой-либо формы согласия или возможности удалить их! А сам врач умер в 2018 году, поэтому узнать, как фото попали в онлайн уже не получится.

Nvidia запустила в 100 странах сервис для реализации метавслененных на технологиях облачного гейминга 🔥

Nvidia запустила Omniverse Cloud — облачное решение, которое позволяет задействовать мощные ресурсы центров обработки данных для работы инструментов Omniverse. Это позволит существенно повысить качество пользовательского VR-опыта, ограниченного вычислительными мощностями клиентских устройств (вспоминаем мертвоглазого Цукерберга).

Также платформа Omniverse Cloud позволит дизайнерам и разработчикам проектировать, создавать и публиковать приложения для метавселенных, используя только облачные мощности Nvidia 🚀

В настоящее время Omniverse используют более 700 компаний и 200 000 человек.

Nvidia создает инструмент с ИИ, который может автоматически ремастерить старые игры 👀

В начале месяца Nvidia представила RTX Remix – инструмент для создания модов, который может автоматизировать процесс создания текстур высокого разрешения и добавления реалистичного освещения в старые игры.

Nvidia демонстрирует этот инструмент на примере игры The Elder Scrolls 3: Morrowind. На видео показано, как нажатием кнопки можно захватить любую сцену в игре и RTX Remix превращает текстуру и освещение в приемлемый современный вид 👍

После работы алгоритма, моддеры могут отредактировать результат работы ИИ и сделать его еще круче!

Роботы учат людей работать ✅

Сейчас активно развивается индустрия ИИ-ассистентов, которые оценивают работу людей и дают комментарии по её улучшению. Вот несколько примеров:

🟣 Приложение TeachFX – позволяет записывать уроки учителей и, после анализа, даёт обратную связь о том, что они делают хорошо и что они могли бы улучшить. Сколько времени они тратили на беседы с учениками? Делал ли учитель паузы?

🟣 Стартап Gong – научил свой ИИ распознавать невыгодные сделки и указывать на ошибки. ИИ записывает любую переписку и аудио/видео переговоры с клиентами, анализирует их содержание и дает советы о том, как в будущем можно улучшить процесс.

🟣 Робот PitchExpert – это бот на основе языковой модели GPT-3, который дает невероятную человекоподобную обратную связь от венчурных инвесторов стартаперам, а также даёт общую «оценку» стартапу и говорит, в какой области его можно применить.

🟣 Алгоритм Yoodi – анализирует речь человека и предлагает способы как ее улучшить. Например, ИИ обращает внимание на слова-паразиты, анализирует язык тела спикера и так далее. Стартап основали выходцы из Apple и Google.

Разработчики Meta* представили нейросеть, которая генерирует видео 🤯

Нейросеть Make-a-Video – это ИИ-модель, которая позволяет генерировать короткие видео по текстовым подсказкам.

Meta* обещает выпустить демоверсию нейросети, но пока доступа к ней не дает. Видео выходят в низком качестве, без звука и длинной не больше 5 секунд.

С картинками наигрались, пора переходить на видеопродакшн! Протестить нейронку, можно здесь 🚀

* – запрещенная на территории РФ организация

Компания Harmonai создала настоящий инструмент для генерации музыки 🔊

Модель Dance Diffusion от компании Harmonai – это нейросеть с открытым исходным кодом, обученная на наборах данных, полностью состоящих из образцов музыки и аудио, которые не защищены авторским правом.

Сейчас плагинов, которые использует ИИ для создания новых мелодий мало, поэтому Harmonai ставит своей целью заполнить эту нишу. Компания планирует создавать свои инструменты для цифровых звуковых рабочих станций (DAW, Digital Audio Workstation), чтобы в будущем ИИ мог работать в режиме реального времени бок о бок с создателем.

Цукерберг показал возможности новой VR-гарнитуры от Meta* 🦾

Марк продемонстрировал возможности новой VR-гарнитуры в смешанной реальности, пригласив двух чемпионов по фехтованию и заодно показав новые контроллеры в действии. В Quest Pro установлены камеры с более высоким разрешением и разные датчики, которые позволяют сделать смешанную реальность более «реальной» и с крутой цветопередачей. Meta* также сообщила, что гарнитура имеет встроенные датчики отслеживания глаз и лица для управления аватарами в социальных сетях.

Официальный анонс Quest Pro состоится 11 октября на Connect, ежегодном AR/VR мероприятии компании Meta*💥

* – запрещенная организация на тарритории РФ

Метаверс умер, да здравствует Метаверс AR!

Речь Тима Кука у остывающего тела корпорации Meta* взбудоражила профессиональное сообщество. «Наконец кто-то осмелился назвать короля голым», — восторгаются одни. «Ты подарил нам свободу от „мертвоглазого“ метаверса и веру в светлое AR-будущее, Тим», — восклицают другие.

И действительно, — в главном Кук прав: мало кто понимает, что такое Метаверс. Но тех, кто понимает, что такое AR, — едва ли больше. А тех, кто понимает, в чем разница между Метаверсом Цукерберга и миром AR-технологий, так воодушевляющим Тима Кука, — меньше ещё на пару порядков. Особенно невнятно (или цинично?) это противопоставление выглядит, когда глава Apple рисует вдохновляющую картину будущего AR-технологий, пересказывая сюжет промо-ролика Meta, выпущенного в июне:

«Я думаю, что AR — это глубокая технология, которая повлияет на все. Представьте, что у вас внезапно появляется возможность преподавать с помощью AR и таким образом демонстрировать вещи. Или в медицинской сфере и так далее». (машинный перевод с нидерландского)

В действительности AR-манифест Тима Кука не повлиял ни на что кроме того, что все метастартаперы мира помоют рот с мылом и к завтрашнему утру поменяют слово «метаверс» на «AR» в своих промо-материалах.

А Meta* продолжит своё пике, стартовавшее в феврале 22-ого года после введения новых мер «по защите конфиденциальности пользователей» устройств Apple, лишившего Meta десятой части выручки.

О, Стив, на кого ты нас оставил!

Иван Суслин, руководитель Центра экспериментальных технологий Цифровой лаборатории ГПМ ЦИ, специально для D. lab

* — запрещенная на территории РФ организация