D. Lab
1.11K subscribers
503 photos
499 videos
1 file
900 links
Цифровая лаборатория Газпром-Медиа Холдинга — R&D, коллаборация, поиск точек роста.
Download Telegram
Media is too big
VIEW IN TELEGRAM
В Skyrim появилась поддержка ChatGPT 💬 🗡

Над этим поработал моддер с ником Art_from_the_Machine. Он добавил в популярную РПГ чат-бот, чтобы NPC в игре реалистично вели диалоги с игроком. Теперь можно через микрофон общаться с игровыми персонажами голосом 🎙.

Для реализации кроме ChatGPT понадобился скрипт на языке программирования Python, а также модели xVASynth (Text2Speech) и Whisper (Speech2Text).

☀️ 🌙 По словам моддера, NPC теперь знают о смене дня и ночи в игре, а также понимают, где они находятся на игровой карте и соответствующе реагируют. Персонажи также научились реагировать на действия игрока во время диалога. Например, NPC можно попросить рассказать о предмете, который вы нашли.

🤖 Но есть и проблемы. На видео выше, снятом в VR, можно заметить, что между репликой игрока и ответом на нее проходит 10-15 секунд. Голоса NPC также отличаются типичной «компьютерной» монотонностью. Так что моддеру еще есть над чем работать. Art_from_the_Machine уже обещает, что в будущих апдейтах NPC будут запоминать диалоги с игроком.

Полную версию ролика можно посмотреть здесь.

Над нейросетью, которая будет писать диалоги для NPC, сейчас работают и создатели Assassin’s Creed.
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6
🌐 В интернете появились десятки сайтов c новостями, написанными нейросетью

Об этом говорится в новом отчете компании NewsGuard, которая проверяет новостные сайты на достоверность информации. Специалисты нашли 49 сайтов на нескольких языках, где за новостное наполнение отвечают чат-боты.

👎 Все странички отличались непримечательными названиями вроде News Live 79 и нигде не указывали, что новости для сайта пишет ИИ. Многие (но не все) из них публиковали откровенные фейки или новости, написанные по непроверенным источникам. Другие содержали автоматические пересказы новостей с популярных сайтов, например, CNN.

🗣 Эксперты NewsGuard искали сайты по ключевым фразам, которые свойственны чат-ботам. Например, в текстах можно было найти фразу «мои знания ограничены сентябрем 2021 года» (my cutoff date in September 2021). В некоторых заметках без редактуры были скопированы фразы чат-бота, что он не может обработать промпт.

🚜 Специалисты NewsGuard пишут, что ресурсы работают как контент-фермы — сайты с сомнительным и дешевым в производстве контентом. Такие странички обычно существуют исключительно с целью генерации трафика для продажи рекламы. Продажа происходит с помощью программатика — платформ для автоматической закупки и продажи рекламы.

Писать новости с помощью ИИ пытаются и «настоящие» сайты. Например, сайт про технологии CNET начал использовать нейросеть для написания новостных заметок. Более чем в половине текстов модель допустила ошибки ✖️.
Please open Telegram to view this post
VIEW IN TELEGRAM
🤔3😱2
Tencent начал продавать дипфейк-аватары по $145 за штуку

⌛️ Китайская компания предлагает за сутки создать цифровую версию клиента. Для этого Tencent потребуется видеозапись длительностью 3 минуты, на которой пользователь произносит 100 предложений на китайском или английском. Утверждается, что при создании аватара используются 10 проприетарных ИИ-моделей.

🧍‍♂️ Аватар может представлять собой как тело человека полностью, так и только его верхнюю часть. При этом для него можно выбрать несколько фильтров, в том числе мультяшный. В Tencent говорят, что основное назначение сервиса — маркетинг и реклама.

🏴‍☠️ В отличие от создателей похожего сервиса Tavus, в Tencent не уточняют, как будет обеспечиваться безопасность данных пользователя, а также есть ли гарантия, что дипфейк не создадут злоумышленники.
😱3👍1
Nvidia представит 20 новых технологий использования нейросетей с 3D☝️

Их покажут на конференции SIGGRAPH, которая пройдет в августе 2023 года в Лос-Анджелесе. Пока речь идет не о практическом применении новых моделей — все они находятся на этапе Research Papers.

Кое-что из того, что Nvidia покажет через 3 месяца, можно увидеть уже сейчас.

👩‍🦰 В своем блоге компания показала реалистичную симуляцию человеческих волос с помощью ИИ, который предсказывал — как объект будет вести себя в физическом мире.

🎾 Еще 1 модель обучалась на видео игры в теннис. Движения, выученные нейросетью, затем перенесли на 3D-модели игроков, которые сыграли теннисный матч — без использования дорогостоящего motion capture.

🏋️‍♂️ Следующая разработка позволяет с помощью нейросетей увеличить детализацию 3D-текстур без дополнительной нагрузки на GPU. Еще 1 модель реалистично передает игру светотени на 3D-объектах.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
7
This media is not supported in your browser
VIEW IN TELEGRAM
ИИ восстановил видео, которое смотрели мыши, по их мозговой активности 🐀

🧠 30-секундный фрагмент из черно-белого фильма смогли восстановить, сканируя мозговую активность мышей в момент просмотра.

🍿 В эксперименте участвовали 50 мышей, которым пришлось посмотреть клип 9 раз.

🎞 На полученной информации ученые обучили нейросеть CEBRA, которая сопоставила мозговую активность мыши с конкретным кадром в видео и смогла восстановить его.

🛠 Для удобства ученых, мышей, которые смотрели видео, генетически модифицировали, чтобы их нейроны при передаче информации светились зеленым цветом. Таким образом, мозговую активность грызунов можно было записывать «снаружи», используя электрооптические датчики.

Подробный рассказ об эксперименте можно посмотреть здесь.

🇯🇵 Мы уже рассказывали о похожем эксперименте японских ученых, которые с помощью нейросети и ф-МРТ снимков восстанавливали изображение, которое видел человек.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍8🔥1
Meta* представила мультимодальную модель, которая различает текст, видео и температуру

Всего ImageBind может работать с 6 типами информации (модальностями). Помимо вышеперечисленных, это еще и аудио, 3D-глубина, а также движение, которое фиксируется с помощью гиростабилизаторов (они, например, используются в современных смартфонах). Информацию о температуре модель обрабатывает на основе тепловых карт 🌡.

Грубо говоря, ImageBind — это более сложная версия сегодняшних нейросетей, в которой ИИ может установить связь не только между текстовой подсказкой и изображением или видео, но и другими категориями, а затем свести их «воедино». Таким образом, работа алгоритмов становится все ближе к тому, как воспринимает реальность человек 🤯.

⛵️ Предположим, вы хотите, чтобы модель сгенерировала продолжительное морское путешествие. ImageBind создаст не только визуальную составляющую, но и подберет подходящее аудиосопровождение, корректно передаст покачивание судна на волнах, а также смоделирует холодный морской ветер.

🍽 Пока модель находится на этапе разработки. В перспективе ImageBind может стать важным элементом создания метавселенных, на которые Meta все еще делает большую ставку.

👃 В компании утверждают, что в будущем в ИИ-модель можно будет добавить и другую сенсорную информацию: прикосновения, запах, речь и др. ImageBind будет распространяться как OpenSource, код модели уже есть на Hugging Face.

*Организация, запрещенная на территории РФ
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
4🔥2
This media is not supported in your browser
VIEW IN TELEGRAM
🛍 Amazon запустил сервис, который позволяет шопиться на маркетплейсе в AR

Amazon Anywhere — это платформа, которая дает возможность делать покупки не выходя из любимого приложения или игры. Amazon показал, как это работает, на примере новой мобильной AR-игры Peridot от компании Niantic — разработчиков Pokemon GO и Harry Potter AR 🧙‍♂️.

👛 Если привязать свой аккаунт на маркетплейсе к игре, то внутри Peridot можно будет зайти на страничку с мерчем и там же оформить заказ (см. видео). Оплатив покупку, можно продолжать играть.

В Amazon отмечают, что сейчас в играх легко купить внутриигровые предметы. Если же игрок хочет приобрести, скажем, подушку с логотипом любимого тайтла, то ему придется выходить из игры, заходить на сайт продавца и т. д. С Amazon Anywhere эта важная проблема решена 😃.

Разработчики, которые хотят интегрировать Amazon Anywhere в свою игру или приложение, могут оставить заявку на соответствующей страничке.

🏠 Недавно появились слухи, что Amazon работает над новым AR-гаджетом для «умного дома». Компания разместила соответствующие вакансии, а затем быстро удалила, когда они привлекли внимание СМИ. Возможно, Anywhere станет важным экосистемным элементом будущего девайса.
Please open Telegram to view this post
VIEW IN TELEGRAM
4👍2
Spotify борется с нейромузыкой, IBM остановил найм новых сотрудников из-за ИИ, на русском вышел роман, написанный в соавторстве с ChatGPT — и другие важные новости за 2 недели

IBM приостановит найм на должности, с задачами которых может справиться ИИ. В компании подсчитали, что 7,8 тыс. задач, которые сегодня выполняют люди, мог бы заменить искусственный интеллект;

OpenAI собирается предложить бизнесу отдельную версию ChatGPT, которая будет стоить в 10 раз дороже обычной (то есть около $200 в месяц). За эти деньги компании получат повышенный уровень безопасности: OpenAI предоставит им выделенные сервера, не будет сохранять историю переписки с чат-ботом и обучать модель на этой информации;

Amazon работает над большой языковой моделью (LLM) специально для голосового помощника Alexa. Alexa и сейчас использует LLM, но она уже не соответствует стандартам, заданным GPT и ей подобным;

Google ограничит количество публикуемых исследований, связанных с ИИ. Компания опасается, что конкуренты могут что-то подсмотреть и использовать для своих разработок;

Убытки OpenAI за прошлый год достигли $540 млн из-за затрат на разработку и обеспечение работы чат-бота ChatGPT. Ранее стало известно, что стартап может тратить по миллиону долларов каждый день, чтобы ChatGPT продолжал функционировать;

Spotify удалил из каталога десятки тыс. песен, сгенерированных с помощью сервиса Boomy. Треки удалили не за нарушение авторских прав, а из-за подозрений, что боты накручивают прослушивания некоторых нейротреков;

В продолжение музыкальной темы: Google выложил для тестирования модель MusicLM. Чтобы попробовать, придется зарегистрироваться в сервисе AI Test Kitchen, где Google делится экспериментальными ИИ-приложениями;

Литрес опубликовал книгу, написанную авторами-людьми совместно с ChatGPT. Произведение получило название Скайнет в эпоху киберпанка. Теория сверхразума и вызовы перед человечеством в XXI веке. Отрывок можно прочитать здесь;

Stability AI выпустили набор инструментов для создания анимации с помощью Stable Diffusion. Анимацию можно создавать на основе промпта, а также исходного видео или изображения.
👍6
Харрисона Форда омолодили с помощью Stable Diffusion 🤠

Ютубер Джим Деркс омолодил с помощью нейросети Харрисона Форда в фильме «Ковбои против пришельцев» 👶.

Деркс рассказал, что вместе с SD он использовал модели ControlNet (позволяет избежать артефактов при создании дипфейка), EbSynth (отвечает за анимацию) и Fusion (чтобы объединить все воедино) ☝️.

Результат получился не хуже (и уж точно дешевле), чем в грядущем пятом «Индиане Джонсе», где Форду возвращали молодость голливудские специалисты по VFX. Правда, нейросети пока не научились удерживать качество дипфейков на протяжении двух часов .
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥31👍1
🔞 Инфлюенсер запустила ИИ-копию себя на основе GPT–4 и продавала доступ за $1 в минуту — что могло пойти не так?

Snapchat-селебрити Кэрин Марджони запустила собственную виртуальную копию — голосового чат-бота CarynAI. По задумке блогера, CarynAI должна была стать виртуальной подругой для одиноких людей.

🤖 CarynAI работает на базе API GPT-4. Чат-бота обучили на YouTube-роликах с Кэрин, которые сейчас удалены. На разработку чат-бота потратили более 2 тыс. часов. Общение с виртуальной подругой стоило пользователям $1 в минуту.

У самой Кэрин в Snapchat около 2 млн подписчиков. На CarynAI уже подписалось более 1 тыс. человек. Блогерша рассчитывала, что чат-бот будет приносить ей около $5 млн в месяц, но сейчас вынуждена исправлять ошибки в работе ИИ.

💢 Дело в том, что некоторые пользователи начали вести интимные переписки с чат-ботом, и бот отвечал им в том же духе. Виртуальная Кэрин не была запрограммирована давать такие ответы — бот просто вышел из-под контроля.

🆘 Сейчас Кэрин делает все возможное, чтобы сохранить свою репутацию. Инфлюенсеру и ее команде приходится «работать круглосуточно, чтобы это не повторилось».
🔥6
🤖 ИИ-чатбот может стать новой стартовой точкой для шопинга на Amazon

Журналисты Bloomberg обратили внимание на новые вакансии Amazon. Компания ищет разработчиков, которые помогут переосмыслить Amazon Search с помощью интерактивного разговорного опыта и перестроить поиск благодаря технологиям глубокого обучения.

💬 Это может означать, что Amazon планирует добавить поисковик в стиле Bing или Bard в свою ecom-платформу. В разговоре с чат-ботом пользователи смогут задавать вопросы о продукте, сравнивать товары между собой и получать персонализированные предложения.

🛒 Bing при поиске определенного товара сразу выдает список релевантных продуктов. ChatGPT поддерживает плагины, которые позволяют заказывать доставку в Instacart или бронировать рестораны в OpenTable — это тоже можно считать базой для внедрения e-commerce функций.

🔎 На Amazon все пока реализовано в виде поисковой строки, где пользователь тратит много времени на поиск подходящего товара среди множества рекламных предложений. Но более половины покупателей в США начинают искать товар сразу с главной страницы Amazon, а не в Google.

🙋‍♀️ Чат-бот позволит Amazon оставаться страницей, с которой пользователи начинают шопинг. Это изменит и сам процесс шопинга — он перейдет из формата поиска в формат диалога.
Please open Telegram to view this post
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
🎧 K-pop артист с помощью ИИ поет на 6 языках

Медиагигант Hybe (стоит за успехом BTS и других корейских поп-звезд) представил новый музыкальный проект Midnatt — его лицом стал известный K-pop певец Ли Хен. Он выпустил дебютный сингл Masquerade сразу на 6 языках: корейском, английском, испанском, китайском, японском и вьетнамском. 💽

Ли Хен, конечно, не такой полиглот: петь на 6 языках ему помогли технологии голосового ИИ-стартапа Supertone. Hybe ранее приобрел эту компанию за $36 млн. 🎙

Смешивая с помощью Supertone голос певца и других людей, в Hybe сделали так, чтобы Ли Хен звучал как носитель каждого из 6 языков. А еще добавили в трек «женскую» версию голоса певца — ее можно услышать во 2-м куплете. 🔊

В Hybe стремятся больше использовать ИИ для генерации музыки. Основатель компании Бан Ши Хек считает, что в будущем искусственный интеллект потеснит артистов людей. 👨‍🎤

Недавно певица Граймс официально разрешила использовать свой голос для синтеза вокала к новым трекам. А вот лейблы Дрейка и The Weeknd добились удаления со стримингов фейковой песни с их голосами, синтезированными ИИ.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2
This media is not supported in your browser
VIEW IN TELEGRAM
🧊 Spline AI помогает создавать 3D-объекты с помощью ИИ прямо в браузере

Spline AI — инструмент для создания 3D-объектов, анимаций и текстур с помощью текстовых промптов. Spline AI создан при помощи Open AI API и работает на базе сервиса 3D-дизайна Spline, который доступен в веб-версии 🖥.

Пользователь вбивает в строку описание объекта, который он хочет создать, а алгоритмы генерируют этот объект или редактируют уже созданный. Также ИИ может по промпту задать объектам нужную текстуру, анимацию, расположение или физику.

🗂 В Spline AI также можно редактировать объекты, загружать свои изображения и видео и работать в командах, создавая 3D-модели одновременно в режиме реального времени.

Пока инструмент доступен в альфа-версии, поэтому использовать его можно бесплатно. Но чтобы начать работать со Spline AI, нужно встать в лист ожидания📑.
Please open Telegram to view this post
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
🤖 Tesla показала обновленных человекоподобных роботов

Tesla представила человекоподобных роботов в октябре прошлого года, но тогда они едва ли могли перемещаться по сцене🚶.

Сейчас Оптимус может самостоятельно идти (хоть и медленно), перекладывать вещи из контейнера и разбивать яйца ногой 🍳.

Также в ролике показали, как робот ориентируется в пространстве благодаря технологиям ИИ, которые отслеживают местоположение объектов. Но судя по скорости ходьбы, пока что Оптимус не сможет далеко уйти 🗺.

Когда иду к маме рассказывать, что разбил ее любимую вазу
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
🚗 Meta* переносит AR в автомобили

Meta* и BMW подключили гарнитуру дополненной реальности к сенсорам автомобиля, определяющим его положение в пространстве. Это позволит реализовать поведение объектов дополненной реальности, соответствующее перемещению пользователя в пространстве.

*Организация, запрещенная на территории РФ
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥3👍1