Google выпустили Genie 4 – новое поколение своей world модели

Предыдущая версия вышла больше года назад, в августе 2025. В новой модели главный упор на реализм, мультимодальность, улучшенную физику и интерактивность.

Модель генерирует мир в реальном времени и сразу со звуком. Музыка, шум окружения и даже диалоги персонажей создаются вместе с картинкой, причем реплики подстраиваются под действия пользователя.

Сцену можно менять и режиссировать с помощью промптов прямо на лету. Например, поменять погоду или добавить персонажей/объекты.

Внутри работает несколько моделей Gemini. Gemini Omni отвечает за реалистичный внешний вид и поведение мира, другие модели следят за связностью симуляции, и отдельно Gemini 3.8 Flash работает агентом в цикле aka мозгом: разбивает цель на шаги, проверяет их выполнение и перестраивает план, если пользователь захотел что-то поменять.

По задумке Google, в таких средах можно тестировать роботов и агентов. Они даже показали демо, в котором гуманоид Apollo от Apptronik играет в шашки внутри сгенерированного мира.

https://deepmind.google/blog/genie-4-a-new-generation-of-world-simulation/