Genie: ИИ создает игры в стиле Super Mario с помощью Google DeepMind⁠⁠

Искусственный интеллект создает игры в стиле Super Mario: Генеративная модель Google DeepMind, разработанная с нуля

После Sora от OpenAI, способной создавать виртуальные миры в стиле Minecraft, Google DeepMind представила свою генеративную модель.

Согласно MIT Technology Review, Genie может превратить короткое текстовое описание, ручной эскиз или снимок в видеоигру в духе классических 2D-платформеров, таких как Super Mario Bros. Однако пока она работает медленно — один кадр в секунду, в то время как современные игры обычно имеют 30-60 кадров в секунду.

Genie обучена на 30 000 часах игровых видео из интернета, включая сотни 2D-платформеров. Этот подход напоминает метод обучения модели GameGAN от Nvidia, которая создала клона Pac-Man.

Предыдущие модели обучались действиям ввода и их сочетанию с видео, но это требовало много работы. Genie же изучает только видеозаписи и анализирует, какие действия изменяют положение персонажа.

Genie генерирует каждый кадр игры в зависимости от действий игрока: если нажать "прыгать", она обновит изображение так, чтобы показать персонажа в прыжке, и так далее.

В будущем скорость работы модели может увеличиться. По словам Тима Роктешеля из Google DeepMind, "фундаментальных ограничений, мешающих достижению 30 кадров в секунду, нет". Genie использует многие технологии, с которыми уже достигнут значительный прогресс в улучшении скорости вывода.

Кроме игр, Genie также может быть использована в других областях. Команда работает над ботами, управляемыми ИИ, которые решают различные задачи в виртуальной среде.