Метаверсище и ИИще

Open Source Video2Video - работает локально.

Это удивительно, конечно, наблюдать, как с опозданием в 2-3 месяца фишки, которые мы наблюдали, роняя челюсти, в Runway или Kling начинают появляться в опенсорсных сборках.

Да, они сходу работают кривовато, качество треш по большей части, но оно РАБОТАЕТ. Ну то есть замысел и алгоритмы заводятся на кургузых опенсорсных чекпойнтах и главное отличие в том, что у энтузиастов не было денег, возможностей и компьюта, собрать конские датасеты, перемолоть их в тренировке и задрать качество. Но дайте время.

И когда я вижу, что появляются image2video, video2video, маски для видео, глубина (MoGe) на гитхабе, я стараюсь все попробовать, чтобы убедиться, что это не фейк. И это не фейк, это работает локально. И когда Барак Обама улыбается и кивает тебе на видео в нужном ракурсе, хотя у тебя было только видео девушки и текст "Барак Обама улыбается", то ты понимаешь, video2video работает.

Тут ирония в том, что не было ни одной картинки на входе.
Девушка - это text2video в Pyramida Flow.
Остальное - это video2video в MochiEdit - этакий контролНет для видеогенерации.

Его можно завести в Комфи вот отсюда:
https://github.com/kijai/ComfyUI-MochiEdit
или отсюда:
https://github.com/logtd/ComfyUI-MochiEdit

Обещают поддержку CogVideo и других.

@cgevent

6.7K viewsSergey Tsyptsyn ️️, 13:10

Полностью опенсорсная видео-генерация.

Рубрика крутые подписчики.

Идеальным дополнением к моим тряпочным тестам выше будет вот такой эпохальный ролик от Димы Жилзоны ПОЛНОСТЬЮ СОБРАННЫЙ в опенсорсной Pyramide Flow.

"В качестве исходных артов генерации Midjourney без какой-либо пост-обработки и апскейла.

Генерации шли в размере 640x384px, при дальнейшем апскейле до 1200x720px и двойном улучшайзинге через две модели Topaz Video AI."

Про память, скорость и прочее почитайте в посте у Димы.
https://t.iss.one/zhilzona/1361

А я лишь процитирую то, с чем полностью согласен:

"Да, не хватает динамики в ценах. Да, не хватает когерентности к концу видео. Да, не для всех объектов просчитывается динамика так, как бы хотелось ее видеть. Да, меняется цвет сцены под конец генерации. Да, шаг влево-шаг вправо и видео распадается. Но! Это огромный скачок по-сравнению с тем, что мы видели хотя бы 3 месяца назад. И дальше будет, я верю, я это предсказывал, только лучше."

@cgevent

8.1K viewsSergey Tsyptsyn ️️, 13:30

Метаверсище и ИИще

0:11

This media is not supported in your browser

VIEW IN TELEGRAM

Зачем платить инфоцыганам, когда есть нейросети? 🤔

Нейросети уже выполняют за тебя массу задач: от контента в соц сетях до реальных продаж!

Как легко и без опыта освоить ИИ — читай ЗДЕСЬ.

Автор канала — кандидат наук и владелец IT-компании, внедряющий ИИ в крупнейшие российские корпорации.
Его опыт — это твой шанс быть впереди конкурентов.

🔥 Заходи, здесь учат использовать нейросети для роста твоего бизнеса: @KiberMisha

#промо

6.8K viewsSergey Tsyptsyn ️️, 14:57

Разведу немного вкусовщины. Ибо рубрика крутые подписчики.

Иногда пощщу работы из коментов или лички.

Засада в том, что большинство работ - это либо хорор, либо цветочки, либо тянки, либо металубок - ну типа щас мы приподнавалим в рунвей салата из флюкса и переходов.

Меня всегда подташнивало от фотореализьма, еще во времена раннего 3Д в нулевых. Где все упарывались в текстуру для кожи, чтобы свалиться в зловещую долину при первом же сдвиге кадра в анимации.

Сложно "додумывать" за фотореализьмом, все уже придумано. Воображению некуда приткнуться.

Некоторое время назад постил вот такой хак-промпт для лайнарта.

А сейчас в коментах Стейси Смит сбросил вот такую наиприятнейшую работу (для меня, с моим плебейским вкусом).

Что мне отчаянно нравится?

Очень простые образы объекты. Каждый додумывает сам.
Аскетично. Есть куда провалиться глазом и не застрять в деталях.
Архетипичные, скажем так, объекты, глаз, стрелки, шестеренки.
Ну и самое главное - это кинжально бьется со звукорядом. Точнее с текстом.
Получается чудовищно просто и символично.
Ну и нет соблазна считать пальцы и придираться "ой у птички глазик не там". Все на месте. Ибо образы и наброски.

В конце как бы развитие и выход в цвет и 3Д. Тут я задергался, но все быстро вернулось в лайнарт - как будто бы к истокам.

Хорошая такая анимационная работа. Мне понравилось.

А, и кстати, замечания от автора:
"рисовал Flux, анимировал Kling и пару переходов Luma, звук от Suno, монтаж в CapCut, а афтерэффектов у нас сроду не водилось..."

Отросло поколение, которое не знает про after effect. Наверное это хорошо. Для них же лучше.
@cgevent

6.8K viewsSergey Tsyptsyn ️️, 20:56

Метаверсище и ИИще