ReCapture: революция в пересъёмке видео с любого ракурса

Исследователи Google представили поразительный новый метод - ReCapture, позволяющий генерировать новые версии существующих видео с различных углов съёмки!

Технология использует комбинацию диффузионных моделей и облака точек для создания промежуточного кадра, который затем улучшается специальным алгоритмом.

Система способна достраивать невидимые части сцены и добавлять кинематографические движения камеры, сохраняя исходную динамику.

Обработка занимает всего 5 минут на GPU A100 при разрешении 384×256 пикселей.

Был такой фильм - «Дежа вю» (Déjà Vu) 2006 года про взрыв парома в будущем, если кто помнит. Один в один получается.
Разрешение чуть поднять и будет отлично. 🎬

Помнится лет 10 назад обсуждали так же в плане футурологии, что скоро фотоаппараты как таковые будут не нужны.

Когда весь мир будет покрыт 8К камерами, - можно просто вернуться в любой момент времени, развернуть нужный ракурс и снять картинку, а ИИ дорисует как было, достроит недостающие детали.

И получается не нужно будет самому копаться во всех инструментах, - просто просим бота, а он уже мгновенно показывает нам картинку или видео ряд из прошлого, а там, глядишь и из будущего.

#ReCapture #VideoProcessing #DiffusionModels
-------
@tsingular

Минобороны США внедряет Claude для анализа разведданных

Anthropic, Palantir и AWS заключили партнерство для интеграции Claude в оборонные ведомства США.
Развертывание происходит в AWS GovCloud с высшим уровнем защиты IL6 для секретных данных.
Система будет анализировать разведданные, выявлять скрытое влияние и предупреждать о военных угрозах.
Госконтракты на ИИ-решения выросли на 1200% в марте 2024.
Amazon, крупнейший инвестор Anthropic, оценивает компанию в $40 млрд.

Нужен суверенный ИИ. Без вопросов.

#Anthropic #Palantir #Claude
-------
@tsingular

You.com запускает ARR - исследователя

Advanced Research & Reasoning преобразует отдельные поисковые запросы в полноценные исследовательские процессы.
(один в один, как у меня в ботах год назад было сделано :) )

Система анализирует до 200 источников на каждый запрос, демонстрируя ход размышлений в реальном времени.

Пользователи получают возможность проверять первоисточники и отслеживать весь путь исследования пошагово.

Надо сказать очень детально и развёрнуто получается.
Объём генерации тянет на документ, а не просто на короткий ответ.

p.s. Работает бесплатно и без VPN (3 таких запроса в день)

#You #research
———
@tsingular

XPENG в рамках XPENG AI DAY 2024 запускает гуманоидного робота Iron

Китайский автопроизводитель XPENG представил человекоподобного помощника Iron ростом 178 см и весом 70 кг.

Механический ассистент оснащён тактильными датчиками в руках с 15 степенями свободы и более 60 суставами.

Устройство функционирует на базе процессора Turing AI с 40 ядрами, поддерживающего нейросети до 30 млрд параметров.

Платформа Canghai обеспечивает автономное управление уровня L4, ускоряя обработку данных в 33 раза.

Робот уже трудится на автомобильном заводе компании, используя те же технологии, что и в транспортных средствах XPENG.

Китайцы не отстают от Tesla - скоро роботы будут собирать роботов! 🤖🏭

#XPENG #Iron #Китай
———
@tsingular

CrowdStrike запускает AI Red Team - службу безопасности систем искусственного интеллекта

Компания запустила комплексный сервис AI Red Team Services для защиты генеративных моделей и LLM.
Специалисты фокусируются на семи ключевых направлениях: утечки данных, уязвимости API, риски интеграций, атаки через отравление данных, выполнение вредоносного кода и манипуляции с конфиденциальной информацией.

Методология включает пентесты, Red Team задачи и тестирование по OWASP Top 10 для LLM-приложений.

Подход основан на проактивной оценке рисков и кастомизации под конкретные сценарии применения искусственного интеллекта.

Полезный сервис, кстати, у среднего и малого бизнеса не всегда до такого руки доходят.
У нас бы тоже ИБшному крупняку подумать над подобными сервисами было бы полезно.
Каспер или Позитив могли бы вполне запустить подобное. 🤖🔐

#CrowdStrike #RedTeam #cybersecurity
-------
@tsingular

Ollama добавила визуальную модель Llama 3.2!

Фреймворк Ollama интегрировал мультимодальную Llama 3.2 Vision в две конфигурации.

Компактная версия 11B функционирует на видеокартах от 8GB VRAM, мощная 90B требует 64GB видеопамяти (чёрно завидуем Маководам!).

Аллилуйя!! Убежал тестировать.
11b-instruct-fp16 - 21GB
90b-instruct-q4_K_M 55GB
90b-instruct-fp16 177GB!!!

В общем, если у вас 24Гига - берите llava34b все-таки.
если меньше - llama 3.2-vision:11b

#Ollama #Llama #Vision
———
@tsingular

CogVideoX1.5: революция в генерации видео

THUDM выпустила обновлённую версию генеративной модели для создания видеоконтента из текста и изображений.

Улучшенная версия CogVideoX1.5-5B-SAT поддерживает формирование 10-секундных роликов с высоким разрешением.

Инструмент включает модули Text-to-Video и Image-to-Video с гибкими настройками параметров.

Оригинальные веса требуют 66+ видеопамяти, но умельцы уже нарезали пайплайны под ComfyUI и даже собрали что-то под 10 гигабайт.
5 минут на локальную генерацию вот примерно такого качества, но в документации пишут, что можно "вообще любое разрешение", причём не исходное, а именно в финальном видео!

В общем, Китай всех делает.
Думал брать подписку на какой-нибудь Минимакс, но уже, похоже не нужно.

В заставке - результат локальной генерации из статической картинки.
UPD: оказывается это под 1.1 старую модель был процесс. Новую ещё ждём.

GitHub
ComfyUI-CogVideoXWrapper

#CogVideo #THUDM #videoGeneration #Китай
———
@tsingular