Google показала Genie 4: виртуальные миры заговорили
У Google новая модель миров: Genie 4 создаёт сцену вместе со звуком и позволяет вмешиваться в происходящее. Звук, диалоги и движение здесь генерируются по мере развития мира.
· 2 мин чтения
Сцену можно менять на ходу
27 октября Google DeepMind представила Genie 4, модель для генерации интерактивных миров. Она продолжает создавать происходящее, пока пользователь перемещается по сцене и управляет камерой.
Текстовые команды работают прямо во время симуляции: можно изменить погоду, добавить персонажа или предмет, попросить другой ракурс. По описанию DeepMind, модели Gemini помогают встраивать такие изменения в окружение и поддерживать связность происходящего.
То есть сначала придумываешь обстановку, а потом можешь передумать уже внутри неё. Для поиска подходящей сцены это куда интереснее, чем каждый раз начинать с пустого поля ввода.
Теперь мир ещё и звучит
Genie 4 одновременно генерирует окружающие звуки, музыку и речь. Персонажи могут поддерживать диалог и реагировать на действия пользователя или события в сцене. Google подчёркивает, что звук в опубликованных демонстрациях создан самой моделью.
Компания также заявляет о более реалистичном движении людей и симуляции физических взаимодействий. Судить о том, насколько устойчиво это работает в произвольном мире, пока приходится по демонстрациям и описанию разработчиков: общедоступного запуска ещё нет.
Для чего это пробуют использовать
В анонсе Google среди направлений названы кино, игры и обучение роботов и ИИ-агентов.
Уже участвующие в тестировании специалисты пробуют быстро собирать варианты сцен для съёмок, оживлять исторические фотографии и делать прототипы игровых пространств, по которым можно пройтись. Например, режиссёр может менять свет, движение камеры и действия внутри одной симуляции, перебирая варианты до съёмки.
Для агентов это ещё и способ готовить разные тренировочные ситуации. Google показывает связку с моделями Gemini, которые разбивают задачу на шаги, а Genie визуализирует их по мере развития сцены. В одной из демонстраций виртуальный гуманоид Apollo играет в шашки.
Посмотреть можно, поиграть пока не всем
Genie 4 остаётся ранней экспериментальной моделью. Сейчас Google открывает исследовательское превью приглашённым тестировщикам и собирает обратную связь.
Дальше обещан доступ подписчикам Google AI Ultra в Project Genie и ранним партнёрам Gemini API и AI Studio. Пока можно записаться в лист ожидания; точной даты широкого запуска в анонсе нет.
Миры уже слушаются текстовых команд. Списку приглашённых свои пожелания пока приходится отправлять обычной заявкой 🌚
