Runway создала ИИ для генерации виртуальных миров

Runway создала ИИ для генерации виртуальных миров

Arkadiy Andrienko

Компания Runway, известная своими инструментами для генерации изображений и видео, представила новую разработку — модель искусственного интеллекта GWM-1, способную создавать симуляции виртуальных пространств. GWM-1 функционирует как авторегрессионная модель, построенная на основе видео-платформы Gen-4.5. Она создает контент последовательно, кадр за кадром, в реальном времени. Пользователи могут взаимодействовать с окружением, задавая действия или вводя голосовые команды.

Разработчики выделяют три ключевых направления применения технологии:

  • GWM-Worlds — инструмент для построения интерактивных сред. Достаточно задать начальную сцену текстовым запросом или загрузить изображение, и система сгенерирует целостное пространство, которое можно исследовать. Модель учитывает геометрию, освещение и физические взаимодействия. Такие симуляции могут использоваться в игровой индустрии, образовательных проектах или для тренировки автономных алгоритмов навигации.
  • GWM-Robotics — модель ориентирована на генерацию синтетических данных для обучения робототехнических систем. Она позволяет создавать разнообразные сценарии, включая изменение погодных условий или появление нестандартных препятствий, что помогает тестировать надежность роботов в различных ситуациях.
  • GWM-Avatars — предназначена для создания реалистичных цифровых персонажей, способных вести диалог. Модель воспроизводит естественную мимику, движение глаз и синхронизацию губ с речью, что может быть востребовано в сфере обслуживания клиентов или онлайн-обучения.

Пока эти три направления развиваются как отдельные модели, но в Runway заявили о работе над их объединением в единую систему. Параллельно компания обновила свою базовую модель Gen 4.5 добавив функцию генерации и редактирования звука непосредственно в процессе создания видео. Теперь пользователи могут получать одноминутные ролики с согласованными персонажами, фоновым звуковым оформлением и диалогами. Также появилась возможность вносить правки в многокадровые видео любой длины, изменяя один элемент сцены с автоматическим распространением изменений на весь ролик.

Обновленная Gen 4.5 уже доступна всем пользователям платных подписок Runway. Доступ к GWM-Robotics будет предоставляться через SDK, а по поводу интеграции GWM-Robotics и GWM-Avatars компания ведет переговоры с партнерами из разных отраслей.

Эти шаги показывают растущий интерес в индустрии ИИ: переход от создания статичного контента к разработке динамичных и интерактивных симуляций, которые могут служить основой для более сложных приложений — от развлечений до решения практических задач в робототехнике и научных исследованиях.

⚔️ Он живёт в аниме: умелец из Китая сделал себе армию летающих мечей
    Об авторе
    Комментарии0