Google представила Genie 4 — нейросеть для создания фотореалистичных интерактивных миров

Google DeepMind представила Genie 4 — нейросеть, которая в режиме реального времени генерирует графику и аудиосопровождение для интерактивных миров.

Технология позволяет создавать фотореалистичные сцены и управлять ими с помощью текстовых команд, полностью формируя визуал и звук виртуального пространства. Прямо во время сессии пользователь может текстом менять погоду, перемещать камеру, добавлять в сцену людей или предметы. Это позволяет трансформировать окружение непосредственно в процессе взаимодействия. Genie 4 также пишет музыку, воссоздаёт фоновые шумы и генерирует диалоги персонажей, причём реплики героев адаптивно реагируют на происходящие вокруг события.

В Google заявляют, что четвертая версия лучше передаёт фотореализм и динамику движений, а также точнее моделирует физические процессы, включая столкновения объектов и аэродинамику. Отмечается, что модель удерживает связность и стабильность сцены до двух минут — это вдвое дольше, чем Genie 3. Тем не менее, со временем мелкие детали и положение объектов всё ещё могут искажаться. Сложные физические взаимодействия и пространственная точность пока остаются главными направлениями для дальнейших исследований.

Сейчас Genie 4 доступна лишь ограниченному кругу тестеров в исследовательском режиме. Позже доступ откроют для партнёров компании и подписчиков Google AI Ultra. Точную дату релиза и стоимость отдельной подписки в Google пока не называют, а для идентификации сгенерированного контента компания внедряет цифровую маркировку SynthID.

Как думаете, в каких играх такая нейросеть пригодилась бы в первую очередь?