Модель для построения и управления миром в реальном времени, позволяющая изменять сцену и среду по текстовым командам.

Описание

Цель продукта заключается в создании интерактивной среды, где пользователь может описывать место и затем взаимодействовать с ним, изменяя его в процессе генерации.

Целевая аудитория включает специалистов, которым требуется визуализация и тестирование концепций, а также разработчиков, работающих над сценарными или игровыми проектами.

Возможности включают описание сцены, перемещение по ней, изменение погодных условий, добавление персонажей и взаимодействие с ними посредством естественного диалога.

Процесс работы предполагает описание места, затем погружение в него и последующие изменения, которые сохраняются в текущем состоянии мира.

Система использует планирование Gemini для поддержания причинно-следственной связи, что позволяет изменениям сохраняться, а также генерирует звуковое сопровождение, включая музыку и диалоги.

Ограничения включают то, что сессии взаимодействия ограничены несколькими минутами, а визуальные детали могут дрейфовать во время длительных сессий.