Инновационный прорыв ElevenLabs: заработок в сфере ИИ-дубляжа

Сегодня технологию ElevenLabs используют сотрудники 41% компаний из списка Fortune 500. Компания уже привлекла $80M инвестиций 

Что нового?
Нейродубляж:

ИИ-стартап, который недавно оценили в $1,1 млрд (подробнее в Bloomberg), запустил студию нейродубляжа.

Теперь можно перевести видео на один из 29 языков (в т.ч. русский) с учетом тона голоса говорящего, акцента, фонового шума, сохраняя голос и эмоции оригинального говорящего.
В предыдущей версии, ролик наверху перевелся бы с кучей искажений, голосовых артефактов.Язык вывода я указала Английский, хотя в видео присутствует несколько языков. Не смотря на это, сервис без проблем перевел мне видос на русский, не теряя смысл.

Новые продукты

Dubbing Studio: можно дублировать фильмы целиком, создавать и редактировать их расшифровки, переводы и тайм-коды. 

Voice Library (голосовая библиотека): безопасная платформа для заработка на версиях собственных голосов, созданных ии. Пользователи могут создать свою профессиональную реплику голоса, проверить ее и поделиться ею через голосовую библиотеку. Когда другие используют эти проверенные голоса, создатели получают компенсацию. Пользователи всегда сохраняют контроль над доступностью своего голоса и условиями компенсации. Маркетплейс уже приносит доход небольшой группе альфа-пользователей.

Кстати, у сервиса есть классификатор речи с использованием ии, который может проверить, содержит ли аудиосэмпл контент, созданный ElevenLabs.  Его они тоже улучшат - включат и другие голосовые модели в свой классификатор.

Приложение Mobile Reader: Ранняя предварительная версия мобильного приложения для чтения, которая позволяет мгновенно преобразовывать текст и URL-адреса в аудио, упрощая пользователям доступ к контенту на другом носителе во время движения. В качестве ознакомительной пробной версии приложение будет доступно бесплатно в течение первых трех месяцев, и пользователи смогут зарегистрироваться для получения раннего доступа через список ожидания.

#elevenlabs

ElevenLabs добавил возможность заработать на клонировании голоса

В одном из прошлых постов я писала, что ElevenLabs анонсировали возможность заработать пользователям на клонировании голоса. И вот теперь все желающие могут загрузить свой голос и получать деньги за его использование.

Как работает:
Пользователь загружает 30 минут аудио голоса, добавляет описание, затем назначает цену и указывает реквизиты.
Голосом будет озвучиваться реклама и прочий контент, а взамен обещают пассивный доход.

Подать заявку можно здесь

Подробнее про ElevenLabs и сравнения с Resemble и тд в трех частях, начать отсюда

Про обновления и русский язык

Про возможность заработка на созданных голосах и инновации

Про дубляж видео на русский и сравнение с HeyGen

#elevenlabs

Еще одна новинка от ElevenLabs: Смешайте свой голос с любым другим и озвучьте на 29 языках⁠⁠

ElevenLabs выпустили новую функцию AI Voice Changer, теперь можно преобразовывать Speech to Speech (речь в речь) и превращать свой голос в другого персонажа, можно управлять его эмоциями и подачей. Сохраняется тембр, тайминги, благодаря чему синтезированная речь звучит ещё реалистичнее, имитируя ваше произношение.

Ваш голос можно преобразовать в любой другой на 29 языках, в том числе на русском. Достаточно будет записи вашей речи и образца чужого голоса.

Легко можно создать собственные AI голоса для своих видео, подкастов, игр и многого другого одним щелчком мыши.

Интересно, можно ли будет продать эти сгенерированные голоса? А так, видно вливание $80M инвестиций, ИИ-стартап развивается стремительно, недаром его недавно оценили в $1,1 млрд.

#elevenlabs

Нейросеть для создания звуковых эффектов

ElevenLabs конечно молодцы - везде успели! Анонсировали свою последнюю разработку - нейросеть для создания звуковых эффектов и заодно Заколлабились с нейросетью Sora, которая успела наделать много шума, еще даже не выйдя в широкие массы. (Про нее здесь)

К генерациям Sora появится возможность добавлять реалистичные звуки по текстовому запросу.

Видео, на котором показываются возможности Sora, уже взорвало интернет, показывая, как визуализации превращаются в невероятные звуки.

Вырисовывается хорошая перспектива для sound-дизайнеров, больше не нужно проводить много времени за поисками подходящего звукового эффекта. ElevenLabs все автоматизирует - сама создаст уникальные звуки, которые можно настроить по текстовым подсказкам.

Да в принципе, для всех креативщиков открываются хорошие возможности для творчества - производство фильмов, игр, музыкальную индустрию ждут изменения. Не нужно быть звукорежиссером, чтобы создать свой проект.

ElevenLabs прям радует частотой инноваций, не даром привлекли $80M инвестиций

Записаться на ранний доступ можно здесь, чтобы в числе первых протестировать нейросеть бесплатно, может даже вотермарок не будет

#elevenlabs