Luma AI: Управление углами камеры теперь доступно для всех

Camera Angle Concepts — так Luma назвали пресеты для управления камерой у Ray2 в ваших генерациях (которые совместимы и с другими контроллерами). Всего 9 пресетов:

Low Angle, High Angle, Ground Level, Eye Level, Aerial, Over the Shoulder, Overhead, Selfie и POV.

Все примеры наглядно можно увидеть в прикреплённом демо.

lumalabs.ai/blog/news/camera-angle-concepts

😳 BLACKTRACED × Буст канала

Анимационный клип Reflection, сделанный на GEN-4

Режиссёр и ИИ-филммейкер Fera поделился своим музыкальным клипом, выполненным в необычном миниалистично-рисованном стиле, напоминающий Аркейн с мрачным вайбом Любовь, Смерть + Роботы или даже игры INSIDE.

Не смотря на довольно расплывчатое повествование и огрехи нейроанимации, работа вызывает ощущение целостного произведения, будто под музыкальный ряд смонтированы вырезки из полного метра или сериала. Музыка авторская, написала её Linda Hamilton Jr.

Автор не раскрывает конкретный пайплайн, якобы всё сделано на GEN-4, чем и привлёк внимание CEO Runway Кристобаля Валенсуэла, который похвалил работу, также отметив "All done with Runway Gen-4".

Но глядя на характер генераций, в нескольких сценах можно увидеть фирменную для Midjourney мазню, когда Вы намешиваете в промпт какой-то определённый стиль.

Так или иначе, работа очень достойная! В 4k можно посмотреть на YouTube-канале автора.

😳 BLACKTRACED × Буст канала

Записывайтесь на Gen:48 Fourth Edition

Подошёл черёд четвёртого фестиваля/конкурса независимого нейрокино Gen:48 от Runway, дата проведения 26 апреля — 28 апреля.

Заявки принимаются до 25 апреля 19:00 МСК. Допускаются авторы и небольшие команды от 1 до 3 человек.

Формат мероприятия остался прежним: участники должны за 48 часов сделать небольшое короткометражное произведение, используя генеративные инструменты Runway, для этого всем начислят по 300,000 кредитов на срок проведения конкурса и предоставят доступ к Epidemic Sound.

Победителей в номинациях Grand Prix и People's Choice наградят по $5,000 и начислят 1,000,000 кредитов для Ваших будущих творений, а также пригласят в партнёрскую программу Creative Partners Program. Всем желаю удачи!

Остальная информация, правила и подача заявок:
runwayml.com/gen48

😳 BLACKTRACED × Буст канала

Dia: генератор речи и полноценных диалогов от двух независимых разработчиков с нулевым бюджетом

Тоби Ким, один из основателей и разработчиков проекта рассказывает, что всё началось с вдохновения функцией подкастов, которые можно генерить в NotebookLM.

Однако ни NotebookLM, ни другие говорилки не удовлетворяли потребность в генерации живой и натуральной речи или полноценного диалога. Так они со своим другом и разработали свою TTS-нейронку, которую назвали Dia. При этом опубликовав модель в открытый доступ для всех желающих.

Ребята нацелены разработать полноценного конкурента Eleven Labs и других генераторов речи, при этом дав пользователям максимальный контроль над генерациями.

Послушайте сравнение результатов одного и того же текста разными моделями: Dia, Eleven Labs и Sesame CSM-1B и разницу действительно заметна в пользу Dia.

Ссылки на первый релиз модели, где Вы найдете всю техническую информацию и гайд по установке: GitHub, HuggingFace.

😳 BLACKTRACED × Буст канала

Новый клип Snoop Dogg: Смешивание традиционного творчества и AI

20 апреля состоялся релиз клипа Snoop Dogg на песню "Last Dance", режиссёром которого выступил Дэйв Мейерс.

Для создания видео использовались нейронки Runway и Kling, а также огромный труд около 30 художников: рисунки, 3D, моушн дизайн и анимация. По словам одного из создателей, на работу ушло несколько месяцев работы (не уточняет сколько конкретно).

В целом, благодаря выбранному визуалу и стилю анимации, создателям удалось добиться самого главного — внедрить работу AI, чтобы оно гармонично смотрелось со всем остальным и очевидно не выпирало. За исключением лишь пары шотов с видом на город: вот тут мне непонятно какая была мотивация использовать устаревшие модели (каждый кадр генерация слегка меняется, создавая эффект визуальной грязи), т.к. на мой взгляд это уже моветон.

Крепкий кейс для всемирно известного артиста в копилку творчества с применением нейросетей!

Сам клип посмотреть в 4К можно здесь.

😳 BLACKTRACED

Hailuo AI обзавёлся функцией Character Reference

Функция работает также, как и в любой другой модели с данной фичей: Вам потребуется лишь одно изображение нужного персонажа, чтобы нейронка создала его динамическую и экспрессивную версию.

Нейронка умеет в различные углы обзора, позы и эмоции + контроль движений с помощью промптов. Попробовать можно здесь: hailuoai.video/create

😳 BLACKTRACED

Higgsfield AI: Мощный генератор видео с огромным количеством пресетов для управления камерой

Новый достойный соперник в области генеративного видео, который даёт возможность генерировать видео из текста и любого вашего изображения.

В Higgsfield более 80 кинематографических пресетов для управления камерой и эффектов: от долли зума и сноррикама до буллет тайма и классических облётов, которые при этом можно смешивать между собой как захотите.

Общее качество картинки и анимаций на выходе вполне могут потягаться с новым Kling 2.0. Разработчики довольно бодро обновляют свою нейронку, добавляя больше элементов для управления генерациями.

На сайте проекта есть галерея генераций, где можно ознакомиться с тем, что умеет нейронка, а также взглянуть по каким промптам генерились работы. Можно попробовать бесплатно.

higgsfield.ai

😳 BLACKTRACED

Midjourney: Первая видео модель уже совсем рядом

Рекап прошедшей еженедельной сессии Midjourney Office Hours, на которой не обошлось без сюрпризов:

Прогресс видеомодели

🟠Первые жизнеспособные результаты появились два дня назад. Качество оказалось неожиданно высоким;
🟠Эстетическая консистентность выше, чем у текущих предложений на рынке, но с редкими "странностями";
🟠Будет доступно для всех нынешних подписчиков;
🟠Нужна ещё неделя дополнительного обучения и пара недель для оптимизации. Первый публичный предпросмотр может состояться в следующем месяце.

Текущие элементы в тестировании

🟠Новые настройки изображений по умолчанию;
🟠Экспериментальный режим “less-conservative”, который обеспечивает более высокое визуальное качество, но снижает точность следования промптам;
🟠Прототипы для персонализации стиля и эстетики;

Omni-Reference

🟠Omni-Reference (объект(ы) на основе одного изображения) проходит проверку у модераторов. Отлично справляется с объединением нескольких объектов, например, двух лиц или предметов в необычных сценах;
🟠Даёт успешные результаты в 80–90% случаев;
🟠Планируется выпуск примерно через неделю, при условии устранения артефактов.

Дальнейшие планы

🟠Выход V7 из альфа-версии. После этого фокус, вероятнее всего, сместится на V8, а не на 3D. 3D возможно завезут в V8;
🟠Улучшают Редактор (инструмент Edit), чтобы он работал более плавно и чётко, а также мог поддерживать изображения всех версий;
🟠Улучшенный Style Reference, разработчики планируют заняться исследованием стилей в течение следующих 12 месяцев;
🟠Исследуются новые альфа-версии сайта с более быстрым сбором обратной связи от пользователей;
🟠Улучшенный апскейлер скорее всего будет отменён для V7 и передвинут к версии V8 (Directed by Robert B. Weide).

Вишенка: Дэвид Хольц сам сказал, что "версия v7.0 — это почти как V6.3, но похуже, т.к. у V6.3 более сложная архитектура". Версия V7 может выдать качество в 10 раз лучше нынешнего, но необходимо и дотягивать имеющиеся вместе с этим все инструменты для стабильной работы. А вот V8 точно-точно будет прорывом.

😳 BLACKTRACED