Инвесторы Tesla подали в суд на Маска, турка задержала полиция за использование ИИ на экзаменах, Apple остановила разработку Vision Pro 2 — и другие важные новости за неделю

✅ Один из основателей OpenAI Илья Суцкевер запускает новый стартап Safe Superintelligence, который будет заниматься разработкой безопасного сильного искусственного интеллекта (AGI). Суцкевер в прошлом году попытался выгнать из OpenAI Сэма Альтмана, но в итоге сам был вынужден покинуть компанию. Говорят, что поссорились Альтман и Суцкевер как раз из-за вопросов безопасности ИИ;

✅ Эдвард Сноуден призвал не пользоваться сервисами OpenAI, после того как в совет директоров компании вошел бывший глава АНБ США Пол Накасоне. Сноуден сам работал в АНБ и вынес оттуда секретные документы, из которых стало известно о массовой слежке властей за американскими гражданами. С 2013 года Сноуден скрывается в России;

✅ Anthropic выпустила новую LLM Claude 3.5 Sonnet, которая, как утверждается, обходит в бенчмарках даже GPT-4o;

✅ Инвесторы Tesla подали в суд на Илона Маска из-за его нового увлечения — стартапа xAI. Истцы считают, что из-за xAI Маск недостаточно внимания уделяет своей «основной» компании, а в некоторых случаях даже ворует у нее ресурсы (как пример приводится покупка Маском Twitter в 2022 году). Возможно, вновь сосредоточиться на Tesla Маску поможет вознаграждение на сумму $56 млрд, которое недавно одобрили инвесторы (видимо, не те, которые подали в суд);

✅ Spotify начал тестировать инструмент Quick Audio, который позволит рекламодателям с помощью нейросетей не только сгенерировать сценарий рекламного клипа, но и озвучить его. Одновременно стриминг запустил собственное креативное агентство Creative Labs, которое будет помогать запускать брендам маркетинговые кампании на платформе;

✅ Турецкая полиция задержала абитуриента, который решил использовать ИИ на вступительных экзаменах. Чувак встроил камеру в пуговицу на рубашке, камера передавала информацию с экзаменационного билета в LLM. Языковая модель, установленная на устройство, спрятанное в подошве ботинка (!!!), обрабатывала информацию и передавала ответ на наушник. Вместе с поступающим задержали его сообщника;

✅ В Букмейте появился виртуальный рассказчик — нейросеть, которая озвучит книги, у которых нет «официальной» аудиоверсии. Помощника обучали на длинных текстах с большим объемом повествования и описаний. В ходе обучения команда Яндекса (ему принадлежит Букмейт) вручную редактирует ошибки, которые допускает ИИ при озвучке. Затем нейросеть дообучается на исправленных результатах. Сейчас в озвучке помощника доступно 13 тыс. книг;

✅ Nvidia все-таки стала самой дорогой компанией в мире. Если на прошлой неделе ее обгонял Microsoft, то в этот раз Nvidia обскакала и его. Капитализация производителя чипов достигла $3,34 трлн против $3,32 трлн у Microsoft;

✅ Apple пока остановила разработку следующей версии хедсета Vision Pro. Вероятно, виной скромные финансовые результаты устройства. Вместо Vision Pro 2 Apple займется бюджетной версией девайса. Если, конечно, ценник в $1 600 можно назвать бюджетным;

✅ Universal Music заключил партнерское соглашение со стартапом SounLabs, который разработал плагин MicDrop для профессионального клонирования голоса. Музыканты лейбла смогут создать клон и получить на него авторские права. В качестве примеров использования плагина приводятся исполнение треков на другом языке, запись дуэтов со своей омоложенной версией и исправление ошибок, допущенных во время записи;

✅ Apple ведет переговоры сразу с несколькими китайскими компаниями об использовании их ИИ в iOS 18 для китайского рынка. В шортлист попали Baidu, Alibaba, Baichuan AI и еще несколько компаний. ChatGPT, который iOS будет использовать в остальных странах, в КНР не работает;

✅ Dell, SMC и Nvidia помогут Илону Маску строить суперкомпьютер, который понадобится для обучения следующий версии Grok (которому, как мы знаем, потребуется очень много ресурсов).

Sony прощается с VR, OpenAI купил две компании за неделю, Meta* тестирует пользовательских чат-ботов — и другие важные новости за неделю

✅ OpenAI зарабатывает на продаже своих сервисов больше, чем когда-то взявший стартап под крыло Microsoft. Это интересно, так как до середины прошлого года у OpenAI даже не было полноценного отдела продаж. Уже в марте этого года стартап вышел на прогноз по выручке в $1 млрд, а Microsoft на это понадобилось еще несколько месяцев (имеются в виду именно продажи сервисов OpenAI);

✅ Телеканал NBC использует в эфирах с грядущей Олимпиады в Париже клонированный с помощью ИИ голос ведущего Эла Майклса. Майклс — легендарная для американской аудитории личность и даже входит в Зал славы спортивных ведущих США. 80-летний Майклс жив-здоров, но в 2021 году ушел на пенсию. Поэтому NBC обратились к нему с предложением натренировать ИИ на его прошлых трансляциях. Клонированный ведущий будет зачитывать в эфире главные события за прошедший день Олимпиады;

✅ Meta* начала тестировать пользовательских чат-ботов в Instagram**. Идея этих ботов в том, чтобы заменить контент мейкеров для выполнения некоторых рутинных задач (например, отвечать на личные сообщения и комментарии поклонников), при этом сохранив стиль общения автора. Тестирование пока ограничено американскими пользователями;

✅ YouTube ведет переговоры с крупными рекорд-лейблами, чтобы получить разрешение использовать записи их музыкантов для обучения ИИ. Получать многомиллионные иски видеохостингу, очевидно, не хочется, а вот создать конкурента Suno и Udio — очень даже;

✅ На этой неделе OpenAI впервые купила сторонние компании. Сначала стартап сообщил о покупке аналитической платформы Rockset, а затем — о приобретении Multi, сервиса для удаленной совместной разработки программного обеспечения;

✅ Стартап Etched анонсировал процессоры Sohu, которые в 20 раз быстрее H100 от Nvidia при работе с ИИ-моделями. Есть одно но — Sohu заточен только под работу с моделями, созданными на архитектуре трансформер, и никакими другими. С другой стороны, именно на этой архитектуре построены все основные нейросети — от GPT до Stable Diffusion. Разработчики пока не говорят, когда Sohu поступит в продажу;

✅ Создатели популярной нейросети для синтеза и клонирования голоса ElevenLabs выпустили приложение для iOS. По сравнению с веб-версией у ElevenLabs Reader ограниченный, но заточенный под смартфон функционал — она зачитывает любой текст (файлы, странички, заметки) качественным синтетическим голосом. На старте будет только поддержка английского, но потом обещают добавить еще почти три десятка языков. В Европе Reader станет доступен с 11 июля, версия для Android будет позже;

✅ Т-Банк (бывший Тинькофф) запустил ИИ-помощника специально для детей. Джуниор-ассистент будет обучать ребенка финансовой грамотности, но может побеседовать и на отвлеченные темы, учитывая при этом «эмоциональный настрой» ребенка. Джуниор-ассистент вошел в ранее запущенную банком Вселенную ассистентов;

✅ Sony, судя по всему, потихоньку сворачивает свой VR-проект. Как утверждают инсайдеры, в разработке для хедсета PSVR 2 находятся всего две игры (которые не факт, что выйдут), денег на другие проекты в бюджете Sony не предусмотрено. До этого компания распустила несколько студий, которые разрабатывали VR-игры. PSVR 2 поступил в продажу в феврале 2023 года.

*Организация, запрещенная на территории РФ

**Instagram входит в Meta — организацию, запрещенную на территории РФ

🎶 Sony разработала «профессиональную» нейросеть для музыкантов

Главная фишка Diff-A-Riff — в том, что она умеет генерировать инструментал к уже готовой композиции с учетом стиля и тональности трека. Это отличает ее от любительских генераторов вроде Suno и Udio

🥁 В основе новой модели лежат предыдущие исследования команды Sony CSL Paris. В более ранней работе исследователи научили ИИ добавлять к композиции «реалистичные и эффективные» (видимо, качающие) басы. Diff-A-Riff этим не ограничивается и может генерировать дорожки для разных инструментов, но только один за раз

🔩 В Diff-A-Riff используется два мощных метода глубокого обучения: латентные диффузионные модели и консистентные автоэнкодеры. Автоэнкодеры сжимают входное аудио, сохраняя высокое качество с помощью генеративного алгоритма. Эти данные отправляются в латентную диффузионную модель, которая создает новое аудио с учетом особенностей трека

🔊 Ученые говорят, что у Diff-A-Riff есть несколько важных плюсов:
- Ей удобно управлять — можно, например, задавать параметры с помощью аудио и через текстовые промпты и делать плавные переходы между лупами
- На выходе получается качественный псевдо-стерео звук с частотой 48 кГц
- Модель выдает результаты быстро — ей нужно 3 секунды на минуту аудио

👩‍🎤 Sony позиционирует Diff-A-Riff как профессиональный инструмент для продюсеров, звукорежиссеров и композиторов. В будущем ученые собираются сотрудничать с музыкантами, чтобы понять, чего им не хватает. А пока можно почитать подробности про модель на Github

📹 Dream Machine научилась создавать видео по ключевым кадрам

✍️ Luma AI добавила в свой генератор видеороликов новый тип подсказок — Keyframes. Теперь можно подгрузить в Dream Machine изображения, которые станут первым и последним кадрами видео, и описать происходящее между ними текстом

🎞 В поле для текстового промпта имеет смысл указать, как именно должны двигаться объекты и меняться цвета. Оставить его пустым тоже можно. ИИ в любом случае сделает автоматическую интерполяцию (то есть придумает плавный переход между фреймами)

На видео есть пример, как мем с Вилли Вонкой плавно переходит в мем Roll Safe

🎞 Судя по примерам, в генераторе по-прежнему есть ограничение на длительность видео в 5 секунд. Но Luma AI пишет, что при желании можно продлить свой ролик после первоначальной генерации и выйти за пределы последнего кадра

👍 После обновления результаты модели действительно стали лучше. Раньше Dream Machine следовала текстовым промптам очень примерно, а вот при использовании изображения в качестве референса выдавала более качественную картинку. Так что Keyframes — логичный апдейт