😱 Роботы-хирурги теперь могут обучаться по видео.

Ученые из Университета Джонса Хопкинса разработали такую систему и уже провели первую успешную операцию.

Теперь робот может с точностью, сопоставимой с настоящим врачом, выполнять сложные процедуры, просто посмотрев видеокурс.

Команда использовала имитационное обучение, позволяющее роботу быть более автономным, точно манипулировать иглой и накладывать швы. И даже если произойдет сбой, он сможет приспособиться и продолжить операцию.

Он сможет по запросу пользователя самостоятельно управлять компьютером: писать код, бронировать поездки и т.д.

Сообщается, что это не единственный проект компании, в котором они работают над ИИ-агентами. По мнению Альтмана, агенты — следующая ступень развития ИИ.

В октябре 2024 года Anthropic уже показали нечто подобное. Обновленный Claude 3.5 Sonnet может видеть экран, двигать курсором, нажимать на кнопки.

👏 OpenAI говорят, что Operator будет в разы лучше.

📼 Apple выпустили Final Cut Pro 11 с поддержкой ИИ.

Видеоредактор обновился спустя 13 лет. Что новенького завезли:

🔸Magnetic Mask — инструмент на базе ИИ, который изолирует людей и объекты в видео без использования гринскрина или трудоёмких методов;

🔸Transcribe to Captions — автоматически создает субтитры, анализируя речь в видео с помощью обученной Apple языковой модели;

🔸Поддержка редактирования пространственного видео: цветокоррекция, эффекты, титры. Полученные ролики можно смело кидать на Vision Pro.

👀 Новые версии Final Cut Pro для Mac и iPad уже доступны в App Store.

🎵Превращаем любой файл в аудиокнигу.

Нейросеть PlayAI обновилась и обзавелась инструментом PlayNote. Как он работает:

🔸Загружаем файл, который нужно озвучить (поддерживает множество форматов: текстовые, аудио и видео);
🔸Выбираем стиль: подкаст, сторителлинг, пародия и т.д;
🔸Выбираем голос озвучки (можно несколько для некоторых стилей, например, для подкаста);
🔸Ждём пару минут и получаем готовую озвучку.

Бесплатно дают озвучить 30 минут, но поддержку русского языка ещё не завезли 😪