В Nvidia создали платформу с ИИ для апгрейда видеосвязи

Maxine улучшает разрешение, подавляет аудиошумы, создаёт субтитры с переводом и выравнивает лицо так, чтобы оно всегда смотрело в камеру. Есть SDK, с которым можно в реальном времени заменять пользователей аватарами. В общем, это целый AI-комбайн для видеозвонков, который к тому же будет открыт для разработчиков.

Из самого интересного то, как заменили кодеки нейросетью. Грубо говоря, алгоритм создаёт ваш же дипфейк. Только компьютер передаёт не громоздкое видео, а компактные данные о движении лица. Принимающий компьютер в реальном времени воссоздаёт картинку. Для юзера особой разницы нет, а вот интернет-трафика гораздо меньше.

Источник: YouTube-канал Nvidia

#ai #nvidia

В NVIDIA поделились PyTorch-библиотекой для синтеза фото и видео

Imaginaire может сгенерировать пейзаж из скетча, изменить на видео погоду, время года и не только. Построено всё на технологии GAN, комбинации из двух нейросетей. Одна генерирует образцы, а другая старается отличить правильные от неправильных. В итоге получаются пикчи, которые иногда не отличить от настоящих.

На видео показано, как это работает. А по ссылке — код и туториалы на гитхабе:

https://tprg.ru/4FRv

#ai #nvidia #нейросети