Genie 3: Google создаёт игровые миры из текста в реальном времени

Напишите «альпийский луг с бревенчатой хижиной и тремя заснеженными вершинами на горизонте» — и через секунды вы окажетесь там. Не в видео, не на картинке: в полноценном трёхмерном мире, по которому можно ходить в реальном времени. Это Genie 3 — новая модель мира от Google DeepMind, которая уже обрушила акции игровых компаний.

Что умеет Genie 3

Genie 3 — первая модель мира, способная генерировать фотореалистичные интерактивные среды по текстовому описанию и позволяющая исследовать их в реальном времени. Ключевые характеристики:

• Реальное время: 20-24 кадра в секунду для плавного взаимодействия
• Интерактивность: миры можно исследовать, а не только смотреть
• Фотореализм: разрешение 720p с детализацией, достаточной для обучения AI-агентов
• Консистентность: ранее увиденные детали сохраняются при повторном посещении

Это не видеогенерация и не NeRF. Миры Genie 3 авторегрессивны — создаются кадр за кадром на основе описания мира и действий пользователя. Среды остаются консистентными несколько минут, а память сохраняет изменения от взаимодействий до минуты.

Project Genie: доступ для всех

Google запустила Project Genie как экспериментальный прототип для подписчиков Google AI Ultra. Пользователи могут создавать миры двумя промптами: один описывает окружение, другой — персонажа или объект управления.

Примеры того, что создают пользователи: серфинг на гигантских волнах с сотнями чаек, альпинизм по деформируемому снегу, полёт на бумажном самолётике над водопадами, гонки на снегоходе через ледяной город. Модель понимает как реалистичные сценарии, так и фантастические — от древних Афин до пластилиновой библиотеки с котом.

Promptable World Events

Genie 3 вводит новую форму текстового взаимодействия — «промптуемые мировые события». Можно менять генерируемый мир на лету: изменить погоду, ввести новые объекты или персонажей. Это расширяет диапазон сценариев, на которых AI-агенты могут учиться справляться с неожиданными ситуациями.

Genie 3 — это ключевой шаг на пути к AGI: возможность исследовать неограниченный диапазон реалистичных сред позволит создавать AI-агентов, способных к рассуждению, решению проблем и действиям в реальном мире. — Google DeepMind

Применения за пределами игр

DeepMind видит потенциал далеко за пределами геймдева. Реалистичные контролируемые среды могут предложить новые способы обучения: студенты смогут исследовать исторические эпохи вроде Древнего Рима. Симулированные среды можно использовать для обучения автономных транспортных средств в реалистичных сценариях — полностью безопасно.

Компания уже интегрировала Genie 3 с SIMA — AI-агентом, способным выполнять задачи в виртуальных средах. SIMA получает цели для выполнения внутри миров Genie 3, не зная о целях заранее: модель симулирует будущее на основе действий агента.

Ограничения

DeepMind честно перечисляет текущие ограничения. Набор действий агентов пока ограничен — promptable events позволяют многое менять в среде, но сам агент делает немного. Точное моделирование взаимодействий между несколькими независимыми агентами в общих средах остаётся исследовательской проблемой.

Genie 3 не может точно симулировать реальные локации. Чёткий и читаемый текст генерируется, только если он явно указан в описании мира. Модель поддерживает несколько минут непрерывного взаимодействия, но не часы.

Реакция рынка

После анонса Genie 3 акции игровых компаний упали. Инвесторы увидели угрозу традиционному игровому производству: если миры можно генерировать из текста, зачем нужны художники, дизайнеры уровней и движки?

Впрочем, реальность сложнее. Genie 3 создаёт впечатляющие демо, но до полноценных игр с нарративом, механиками и прогрессией ещё далеко. Скорее это инструмент прототипирования — возможность быстро проверить идею мира до вложения ресурсов в разработку.

Ответственная разработка

DeepMind подчёркивает приверженность ответственной разработке. Открытые и реалтаймовые возможности создают новые вызовы для безопасности. Компания работает с командой Responsible Development & Innovation над пониманием рисков и их смягчением.

Genie 3 доступна через Project Genie для подписчиков Google AI Ultra. Руководство по промптам поможет освоить создание миров.