DOOM запустили на нейросети. Эксперимент с необычным движком-платформой

Легендарный шутер DOOM продолжает путешествие по самым неожиданным платформам, которые превращают в игровые.

Эксперименты над DOOM продолжаются. Технические специалисты Google Research решили организовать запуск на очень неожиданной платформе — на базе нейросети.

Представили движок GameNGen, который позиционируется как «первый игровой движок, полностью основанный на нейронной модели, который позволяет взаимодействовать со сложным окружением в реальном времени на длинных траекториях с высоким качеством. GameNGen может интерактивно моделировать классическую игру DOOM со скоростью более 20 кадров в секунду [FPS] на одном TPU [тензорном процессоре]…».

Нейросеть обучали игре в DOOM, а затем она начала «предсказывать» происходящее и «достраивать» геймплей (следующие игровые кадры):

«GameNGen обучается в два этапа: (1) RL-агент учится играть в игру, и тренировочные сессии записываются, и (2) диффузионная модель обучается выдавать следующий кадр, основываясь на последовательности прошлых кадров и действий…».

Теперь нейросеть предугадывает действия игрока и получившийся «сгенерированную шутер» очень сложно отличить от обычной версии DOOM.

Ролик: https://youtu.be/O3616ZFGpqw

***

Автор обложки: id Software, Nightdive Studios, Bethesda. Источник изображения: YouTube.com