NeuralOS: операционная система на нейросетях

Исследователи создали NeuralOS — первую попытку симуляции операционной системы через нейросети. Система предсказывает кадры экрана в ответ на действия пользователя: движения мыши, клики, нажатия клавиш.

Архитектура объединяет рекуррентную нейросеть для отслеживания состояния компьютера и диффузионную модель для рендеринга интерфейса. Обучение прошло на записях Ubuntu XFCE с случайными и реалистичными взаимодействиями.

Попробовать можно на neural-os.com. Пока точно работают мышь и запуск приложений, с клавиатурой сложнее. Но это шаг к полностью адаптивным нейроинтерфейсам будущего.

Кстати, неплохо продолжает вот эту мою мысль

#NeuralOS #diffusion #RNN
------
@tsingular