Google представил игровой нейродвижок

Команда Google разработала инновационный нейродвижок GameNGen, способный анализировать действия игрока и генерировать визуально неотличимый от оригинала игровой процесс Doom.  

Для создания этого проекта сначала был обучен агент, играющий в Doom, что позволило автоматизировать сбор данных для тренировки основной нейросети. Затем эти данные использовались для обучения модели Stable Diffusion 1.4, которая научилась генерировать кадры игры на основе текущего состояния и действий игрока. 

Разработчики GameNGen уделили особое внимание обеспечению устойчивости создаваемых кадров, чтобы объекты и персонажи сохраняли свое положение и внешний вид. 

В результате нейродвижок показал способность интерактивно имитировать классический Doom со скоростью более 20 кадров в секунду при запуске на одном тензорном процессоре Google. 

Для оценки качества генерации была проведена экспертная оценка. Группе из 10 экспертов показывали ролики длительностью 1,6 и 3,2 секунды, где одновременно воспроизводились реальная игра и симуляция. Эксперты должны были определить, какая запись является настоящей игрой. Для роликов 1,6 секунды доля правильных ответов составила 58%, для 3,2-секундных – 60%. 

Ранее американский стартап Exists разработал и запустил программу на базе ИИ, которая сможет создавать видеоигры по тестовому запросу. Она называется GenAI. 

Нейросеть сможет создать трехмерное пространство по описанию. При этом разработчики отмечают, что пользователю не потребуются профессиональные навыки в геймдизайне и программировании чтобы использовать ПО.