#ai #neuro #video #animate #real #sync #gen #avatar #emo

EMO (Emote Portrait Alive)

EMO – нейросеть, которая по одной фотографии делает реалистичный липсинк, с эмоциями и уместной мимикой под голосовую дорожку. Не просто речь, но даже и сложное по мимике пение.

Сайт проекта:
https://humanaigc.github.io/emote-portrait-alive/

Выглядит достаточно реалистично. И это всë ещë развивается. Подобные технологии - лишь кирпичики в будущем виртуализированном WEB3

В конце первого видео есть пару сравнений с ближайшими конкурентами. Разница существенная.

Разработано под крылом "Institute for Intelligent Computing, Alibaba Group"

---

Даже на этом демо есть полностью сгенерированое фото модели. То есть для будущих аватаров даже фото кожанного не обязательно, что бы модели, актëры и певцы не возмущались по поводу прав на свои оцифрованные образы.

Смотря это демо, поймал себя на мысли, что пламенные речи любого политика скоро будут выглядеть так, как-будто снятые с натуры.

Копировать (генерировать) голоса уже практически научились. Достаточно несколько минут записи голоса человека, что бы скопировать основные его тона и окраски. Если есть часы записей голоса - то обученная на них точность генерации может быть сложно отличима от оригинала.

Времена аватаров всë ближе 😏

📌 @tech_di

#ai #gen #avatar #video #photo #vasa #microsoft

Microsoft представила свою нейросеть модели VASA, которая анимирует по фото "говорящую голову" с приближенной к реалистичной мимике и движениям головы.

Можно считать её как ответ китайской Alibaba Group с их проектом EMO

Заявляется Real-time, то есть генерация в реальном времени. Нужна только фото персонажа, а далее по звуку голоса происходит "оживление" на видео. Размер 512x512 со скоростью 45 кадров в секунду в автономном режиме пакетной обработки и поддержка до 40 кадров в секунду в режиме онлайн-потоковой передачи с предшествующей задержкой всего 170 мс, оценка проводилась на настольном ПК с одним графическим процессором NVIDIA RTX 4090.

Генерацию можно контролировать, задавая эмоции, расстояние от камеры, направление взгляда и т.д.

Сейчас VASA в закрытом тестировании, позже выпустят для всех желающих.

---
Всё внимательнее нужно относиться к тому, что показывает "телик" и какие новости развешивают по соц.сетям... С учётом того, что искусственная генерация голоса уже вышла на достаточно высокий уровень достоверности — создание правдоподобных фейков становится всё проще.

📌 @tech_di

#gen #select #pand #film #evg

Конечно же, это фильм. 😀 Вымышленный сюжет. Однако, на его примере можно увидеть вариант современной евгеники.

Сравнить хотя бы с описанием на #wikipedia
https://ru.wikipedia.org/wiki/Евгеника
Подмечаю, как тонко эти идеи "выгораживают" в вики.

А идеи всë те же, старые. Как обычно, меняется обложка и сеттинг.

Сюда же с лëгкостью можно отнести и искусственное оплодотворение. И повестку с однополыми браками, которые самостоятельно это сделать не в состоянии.

Но то, что в сюжете этого фильма -- это прям новый массовый уровень.

#ai #video #gen #vs #checkpoint

Чекпоинт осень 2024

Текущие возможности общественно доступных нейросетей для генерации видео-контента

...

Прогнозно, в 2025 к лету в доступе будут следующие поколения моделей с приближением к реализму.

📌 @tech_di