Двойная LoRA

Ранее я уже делился одним из вариантов, как обучать LoRA. В этом посте добавлю ещё немного практической информации. 🫡

Как сгенерировать изображение с двумя людьми?
На самом деле, тут нет ничего сверхсложного — всё примерно так же, как и с генерацией одного человека.

Предположим, что вы обучили две отдельные LoRA-модели на двух разных людях. К сожалению, существующие инструменты пока не умеют одновременно применять несколько LoRA в одной генерации. Но это не проблема — есть рабочее решение.

📌 Сначала генерируем изображение с двумя персонажами. К одному из персонажей подключаем одну из готовых LoRA и описываем его. Второго также лучше заранее описать в промпте: пол, телосложение, одежду и другие важные детали персонажа — это упростит дальнейшее редактирование. Но не обязательно, так как потом можно будет заменить всего персонажа целиком.

📌После генерации переходим в режим редактирования — inpaint (писал про него тут).

📌 Выделяем нужную зону для замены. Например, если вас устраивает поза, одежда и общая композиция, но нужно изменить лицо второго персонажа — выделяем область головы (включая волосы). Можно выделить и всего человека, тогда ИИ заменит исходя из описания полностью.

📌 Добавляем уточняющий промпт, например:
woman with long blond hair

📌И самое главное — подключаем LoRA второго человека (также в стилях).

ИИ встроит нужное лицо в уже сгенерированное изображение, ориентируясь на вашу LoRA и промпт. 🙌

Работает это не так стабильно, как генерация по одной LoRA, и может не получиться с первого раза. Но со второй или третьей попытки результат обычно получается достаточно хороший.
Таким способом можно собирать изображения с 2, 3, 4 и более людьми. 💪

На обложке к посту наконец то поймал Слая использована только моя LoRA. Для известных людей можно вообще не обучать — датасеты уже давно есть у большинства моделей.

@VAI_ART
#VAI_Practice

Подкасты Notebooklm

Интересный симбиоз: можно взять статью, загрузить её в NotebookLM — и получить подкаст, созданный на основе текста.🔥🔥🔥

Я провел быстрое исследование по ИИ-технологиям с акцентом на их влияние на науку и технологии (звучит уже почти волшебно). Делился результатами вот здесь — писал про глубокое исследование.

Да, в некоторых местах слышны мелкие шероховатости, но в целом всё звучит весьма достойно.

Если лень читать длинные статьи — просто загружаете нужный материал (поддерживаются разные форматы), и получаете звуковой файл, который удобно слушать в дороге или во время тренировок.

Сейчас есть ограничения — до 500 000 слов или 200 МБ.

Реально крутая штука — попробуйте сами и послушайте, насколько это хорошо звучит.💪

P.S. Нужен VPN.

@VAI_ART
#VAI_News