Тестирую разные штуки, чтобы синхронизировать аудио с губами. ИИ-технологии равиваются и довольно неплохо.

Голос, естественно, тоже синтезирован.

Трейлер альтернативной версии человека-паука, который я сделал для проекта Relaity. Смотреть нужно со звуком.

Специально делал визуал как в крутых компьютерных играх и эмулировал Ureal Engine.

Выше писали, что картинка у видео с рыжей девочкой плохая 😃 (хотя это эмуляция под старую кинопленку, поэтому видео выглядит имеенно так). Ну держите хорошую. Full HD не выкладываю. Она версит 1 гб.

Это видео — реинкарнация "Унесенных призраками" Хаяо Миядзаки. Если бы мультфильм стал фильмом.

Динамический трейлер был подготовлен для проекта Relaity, который планировал выводить на рынок ИИ-сериалы.

Смотреть нужно со звуком.

Сделал трейлер к новой серии звездных войн для проекта Relaity: The Rice of Skywaker.

Действие происходит в Китае. Неспокойные времена в республике.

Клонировал голоса йоды и ко, сделал музычку. Смотрите со звуком.

После публикации этого видео из Калифорнии в сети X стоимость акций Tesla обвалились на 10%.

Как написал пользователь xth, Tesla Cybertruck оказалась не такой уж и неубиваемой. Илон Маск пока не дал никаких комментариев.

С вами были нейроновости, которые напоминают — не верь всему, что пишут в интернете.

Видео сгенерил я, а Илон Маск чувствует себя прекрасно. Как и Tesla.

Еще год назад сложно было представить, что генерация видео будет такой крутой, как сейчас. Я пробрался в Kling, китайскую “убийцу sora” и да — серьезная заявка.

Если вы пробовали делать ии-видео, вы знаете, что самой большой проблемой всегда оставалась физика, сложные движения и т.д.

Как все утроено у runway: Видео генерится 4-х секундными фазами и чаще всего — это либо zoom-in кадра, либо zoom out.

То, что вы видите сейчас в этом видео — это действительно серьезный прорыв. Sora в связи с появлением таких сильных (речь о Kling) игроков просто обязана выйти в публичное использование в ближайшее время.

Ведь свято место пусто не бывает.

И да — я специально вручил китайцу в руки ложку вместо палочек. Это забавно.

Вы просили "спагетти тест", пожалуйста. Сделал несколько очень длинных шотов, чтобы вы увидели дубли без склеек.

Для тех, кто не знает, что такое "спагетти-тест". В апреле 2023 года был сгенерен клип Will Smith eating spaghetti. Это был ужасный и демонический ролик, в котором было ужасно все (потому что ИИ-шки еще не умели – при этом видос залетел и собрал тогдашнем Twitter 8 млн просмотров).

Прошел год, и теперь я показываю, какой громадный скачок совершен.

Видео сделано в Kling, промты писал на китайском. И да — это "черри-пики": я генерил Уилла Смита в миджорни, а потом оживлял в Kling. Сама сетка Уилла Смита рисовать отказалась.

Если хотите посмотреть в максимальном качестве — Full HD в 60p, то видео залил на YouTube. И да — звук не будет лишним. Я сгенерил классный трек.

Мне не хватает ваших голосов.

Друзья, канал сильно обновляется и в ближайшее время тут будет больше крутого, красивого и полезного контента.

Для внедрения всех необходимых изменений мне не хватает ваших голосов. Если у вас «Премиум аккаунт» в телеграм, бустаните, пожалуйста, “Нейронутых».

Нам очень нужна ваша поддержка.

https://t.iss.one/boost/neuronuts

Пока я делаю одно из самых сложных видео в своей практике so far, держите галактическую игру престолов.

Мне всегда было интересно, как бы выглядел любимый сериал, если бы он стал немного «Звездными войнами».

Ответ по ссылке: https://youtu.be/GSek9wAVH9M?si=yi2egSIvViWa2IJU

Это еще одно классное видео, которое делалось для проекта Relaity.

В 18-01 будет премьера видео.

Выкручиваем звук на полную. John Snow in da house.

Создание этого AI-клипа стало для меня настоящим испытанием. Нужно было не только сочинить музыку, но и создать сотни изображений — при этом не просто генерации на тему «Игра престолов», то, что соответствует тексту песни (все слова выложил на YouTube).

Следующий шаг анимировать изображения для воспроизведения сложных движений персонажей и реалистичной игры музыкантов.

Затем пришлось синхронизировать музыку с движениями музыкантов, чтобы казалось, что они действительно играют свои партии.

Особенно сложно было добиться точного совпадения ударных Тириона Ланнистера с ритмом, чтобы его удары палочками идеально попадали в такт. Но я ударник (да, я занимался в музыкальной школе по классу «духовые инструменты) — так, что чувство ритма у меня в крови течет.

В итоге, это оказался самый сложный проект, который я когда-либо создавал. Да, некоторые кадры неидеальны. Но так или иначе — я выжал из нейросетей 300% процентов всего, что они умеют на сегодняшний день.

https://youtu.be/T6L49D1xG_Q?si=TBgFw26ERIKn5OK7

На каналах пишут: вышла Gen-3, убийца всего. "Kling и Dream Machine рядом не стоят". Пишут такое админы телеграм-каналов, у которых нет подписки ни на один из сервисов. У меня подписки во всех трех. И я вам скажу очень очевидную вещь:

Каждая сеть в чем-то превосходит конкурентов. Но сильно лажает в других аспектах.

Например: Luma Dream Machine очень изящно анимирует "черри-пики", но когда речь доходит до собственных генераций — лица плывут и вообще получаются "люди-желе".

Kling очень круто работает с едой (да и вообще много с чем). Но хуже анимирует "входящие" изображения.

Ну а Gen-3 — как по мне — так это вообще очень сырой продукт, который выкатили в спешке, так как конкуренты уже представили мощные модели. Скоро выложу видео, сделанное в Gen-3. Сами посмотрите

И да — я уже много раз это говорил и повторю снова: добиться хорошего (а тем более выдающегося) результата в одной нейросети — невозможно. Это всегда комплекс ИИ-инструментов, который используется для решения одной задачи.

Когда меня спрашивают, какие нейронки, я использую для работы над тем или иным проектом, далее всегда следует длинный список.

Вот и сейчас в чате мелькнул вопрос, какими инструментами я делал музыкальный клип "Игры престолов".

Изображения: MidJourney, Magnific
Видео: Luma Labs / Dream Machine, Kling AI, Haiper, Gen-2
Музыка: Udio, ChatGPT

Итого: 9 нейронок

Итак, первые впечатления от Runway Gen-3.

Выше я писал, что это сырой продукт — и это действительно так. Однако. В третьей версии удалось серьезным образом поработать с физикой и сложностью генераций. Версия Gen-2 давала очень однообразные и банальные анимации (как правило за счет движения камеры, но не объектов в кадре).

В Gen-3 все совсем иначе. Я качестве теста я нагенерил и смонтировал ролик о раллийной гонке. Посмотрите как сильно продвинулся вперед процесс генерации ИИ-видео. Дворники в автомобиле выглядят, мягко говоря, странно. Но это, пожалуй, один из немногих жирных минусов этого теста. В остальном все на высоком уровне. И есть реальное ощущение скорости.

Для того, чтобы оно появилось, впрочем, я ускорял каждый отрезок в 4 раза. В общем, резюмирую: Gen-3 — это интересный и перспективный продукт. Если вы покупаете максимальный тариф, то генерить можете неограниченное число видео в месяц, что прекрасно. Dream Machine от Luma Labs на максимальном тарифе дает сгенерить только 200 видео. До окончания месячного периода осталось еще 10 дней, а лимит я почти весь выжег (хотя не делал все, что хотел).

В общем выводы кратко. Gen-3 плюсы:

1. Безлимит на генерации на максимальном тарифе (это единственный рентабельный тариф у Runway).
2. Хорошая физика. Не идеальная, но гораздо лучше, чем было в версии 2.0
3. Качественная проработка изображений. Детализация (которой нет у Dream Machine – о ней я напишу отдельно).

Gen-3 минусы:

1. Программа жутко тупит и постоянно выдает красные флаги (например на слово cockpit — подразумевая, видимо, что слово «cock» — это плохо. Создателям надо поработать с настойками фильтров, пока делал видео, отправил кучу отчетов об ошибках.
2. Нет возможности загружать фото и анимировать их (думаю, что появится, но пока нет). То есть выпадает крутая связка: Midjourney + Gen 3. Зачем, спросите вы? Потому что лучше MJ картинки пока ни один сервис не делает.

Впрочем, все, что я написал — это слова. Лучше посмотреть видео и сделать свои собственные выводы. Как вам? Напишите в комментах, что думаете о Gen-3? Видео в следующем посте: 👇👇👇

Смотрите видео и оставляйте комментарии: как вам Gen-3?

https://youtu.be/D5k3cMfNczM

Удивительное дело — начинаешь делать посты, люди начинают отписываться :-) Удивительный телеграм. Вижу это уже на протяжении многих лет. Просто мысли вслух.

Чтобы пост был по теме, прицепляю картинку. Да здравствует ИИ.

Сексуальные ангелы Victoria’s Secret на сон грядущий. Я продолжаю углубленно работать с Runway Gen-3, и чем больше генераций делаю, тем больше мне все нравится.

Пришлось покрутить промты, чтобы хакнуть систему и получить девочек в прекрасных сексуальных бикини. Все получилось.

Смотрите это видео в 4К. Иначе упустите половину удовольствия.

https://youtu.be/xmT36xVPFj0

Приготовьтесь познакомиться с самыми милыми хищниками, которых вы когда-либо видели. В этом видео — мини-версии животных: лев, гепард, снежный барс, волк и многие другие, созданные с помощью Gen-3. Я уменьшил всех до размера, который помещается на кончике пальц. Результат очарователен.

Это ТАК МИЛО!

https://www.youtube.com/watch?v=kizshNsx_yQ

Давно хотел сделать Гарри Поттера в стиле Breaking Bad. И вот что получилось.

ИИ-сус.

Как человек, который проработал много лет в ИД "Коммерсантъ", я профессионально деформирован. Ежедневным упражнением в газете было придумывание заголовков. С тех пор я все вижу не как нормальные люди.

Генерил всякое. И тут пришла на ум мысль, что Иисус — это ИИсус, и даже #ИИ-сус (привет "Американским богам" Геймана), который должен быть современным и стильным. Сгенерил. Не в обиду верующим. Это просто картинка. Второе пришествие.