🍭 Продолжаем генерировать искусство — новая нейронка Artbreeder-Collages использует простые коллажи и текстовую подсказку для создания любой сцены. Можно попробовать в бета-версии:
https://collage.artbreeder.com

Инструкция: выбираем или создаём новый коллаж, двигаем части коллажа курсором и создаём простую картину, затем вбиваем желаемый запрос (во что должен превратиться коллаж) и нажимаем «Render». Нашёл в Twitter.

#Neural_network | Not Boring Tech

🧩 На видео реалистичная 3D-версия лондонской улицы, которую создали из 60-секундного видео на обычном смартфоне. Просто посмотрите на количество деталей — всё это максимально точно оцифровали с помощью Instant NeRF от Nvidia. Нейросеть превращает сделанные под разными углами видео в готовую трехмерную сцену. Получается красиво! Здесь больше примеров.

#Neural_network | Not Boring Tech

👨‍🔬 Тут исследователи научили нейросеть делать новые открытия в альтернативной физике — она описывает физические явления, которые раньше были загадкой, или по-новому истолковывает старые. Сперва модели показали известные явления, а после анализа она выдала верные переменные, которые отвечают за этот процесс.

Затем ученые показали алгоритму видео явлений, где нет точного ответа — для лавовой лампы и «воздушного танцора» ИИ смог определить по восемь значений, а огонь в камине он описал 24 переменными. Результат называют впечатляющим! Такие технологии помогут физикам делать новые открытия, до которых они бы сами не догадались.

#Neural_network | Not Boring Tech

✨ Нейросеть MineDojo от NVIDIA посмотрела туториалов на 33 года (!) хронометража, прочитала 7 тысяч страниц вики и 340 тысяч сообщений на Reddit, чтобы научиться играть в Minecraft.

В результате нейронка стала профессиональным игроком — она охотится на животных, добывает материалы, изготавливает предметы и многое другое. На моей памяти это уже третий алгоритм, который живет в виртуальном мире Minecraft, но этот оказался самым мощным. Можно посмотреть видео с подробностями, а также запустить исходный код.

#Neural_network | Not Boring Tech

🌸 Если кто-то пропустил, группа из тысячи исследователей выпустила новую языковую модель — BLOOM. Она содержит 176 миллиардов параметров (на миллиард больше, чем GPT-3), а также поддерживает 46 естественных языков и 13 языков программирования.

Генерирует любой текст по одной подсказке, от рецептов до структурированных рассказов. Самое главное — нейросеть полностью бесплатна и общедоступна. Её можно скачать и протестировать здесь. Го тестить!

#Neural_network | Not Boring Tech

​🤩 Ещё пять лет назад нейросетями пользовались только гики, а теперь TikTok добавляет в своё приложение нейросеть и выкатывает её на миллиард пользователей. Во время записи ролика нужно ввести текстовое описание, а ИИ сгенерирует задний фон для видео по промпту за пару секунд — довольно релевантное решение для TikTok.

Правда, результаты не сравнятся с DALL-E 2 — изображения получаются абстрактными намеренно, чтобы нейросеть не смогла реалистично изобразить обнажёнку или сцены насилия. Безмерно воодушевляет, что сегодня прикоснуться к искусственному интеллекту может каждый.

#Neural_network | Not Boring Tech

🥳 Дипфейки выходят на новый уровень — можно заменить не только лицо, но и всё тело. Нейросети NeuMan от Apple хватит небольшого видео с вами, чтобы сгенерировать вашу полноценную 3D-модель и перенести её в любую сцену.

Нейронка распознаёт фон, человека на видео с разных ракурсов, добавляет новый фон и «заставляет» синтезированную модель человека выполнять разные действия на видео — танцевать, прыгать и так далее. Результаты получаются очень реалистичными, скоро можно будет заменить настоящих каскадёров на опасных трюках. Если вы вдруг хотите и себя научить паркурить — код лежит на GitHub.

#Neural_network | Not Boring Tech

💯 Кстати, Stable Diffusion умеет ещё генерировать анимации на основе видео и текста — вот ремейк сцены из фильма Ла-Ла Ленд в стиле аниме с частотой 8 кадров в секунду. Только всмотритесь в детали! Такие видео можно самому сгенерировать в Google Colab за полчаса.

#Neural_network | Not Boring Tech

🪁 NVIDIA научила нейросеть GET3D генерировать реалистичные 3D-модели персонажей, зданий, транспорта, животных, да и чего угодно — лишь бы был датасет фото нужных объектов, снятых под разными углами.

Сгенерированные фигуры имеют высококачественные структуры и сложные геометрические детали, а нейросеть впечатляет своей производительностью — она создает около 20 объектов в секунду с использованием одного графического процессора. Можно быстро импортировать полученные трехмерные модели в игровые движки и средства визуализации для редактирования. В перспективе это может упростить разработчикам создание 3D-моделей для игр и фильмов!

#Neural_network | Not Boring Tech

✨ Всё-таки интересные прецеденты мы наблюдаем после развития генеративных нейросетей. Как известно, для обучения нейронок используются общедоступные данные — теперь многие художники и разработчики в ярости, что на их работах обучили алгоритмы. В одном из случаев, Эрин Хэнсон потратила годы на создание собственного стиля, используя яркую цветовую палитру и массивные мазки кистью.

Теперь Stable Diffusion может воссоздать ее стиль в несколько кликов, потому что он был обучен на её произведениях. Хотя разработчики тех самых нейронок утверждают, что искусство — это менее 0,1% набора данных для Stable Diffusion, авторов это не успокаивает. Причем это далеко не единственный случай — например, независимые разработчики планируют подать коллективный иск против Microsoft из-за использования их кода для обучения ИИ Copilot.

🍇 Инициаторы заявляют, что компания хочет превратить программистов в источник ресурсов для обучения, и ничего не давать взамен. Авторы работ хотят сделать обучение моделей более контролируемым и поэтому собирают списки тех, кто не хочет, чтобы его картинками кормили ИИ. Боюсь, что они могут не успеть — пока люди будут разбираться, нейросети заменят ещё больше профессий. Поэтому я вижу единственный выход — интегрировать ИИ в свою работу.

#Neural_network | Not Boring Tech