Runway представила GWM Worlds 2 — модель, которая создает интерактивную сцену с видео и звуком прямо во время взаимодействия с пользователем. У такого мира нет заранее заданной продолжительности: он продолжает генерироваться после каждого нового действия, а не заканчивается как обычный ИИ-ролик.
Предыдущую версию GWM Worlds компания показала в декабре 2025 года. Она уже могла поддерживать пространство при длительном движении по виртуальной сцене, а в Worlds 2 Runway добавила звук и более свободное управление персонажами и окружением. Видео генерируется в разрешении 720p с частотой 24 кадра в секунду.
Пользователь сможет ходить, ездить и независимо двигать камеру, а обычными текстовыми командами — управлять персонажами и самой сценой. Например, можно заставить героя побежать или прыгнуть, включить лампу, изменить ее цвет или устроить пожар. Персонажи смогут разговаривать, причем модель одновременно генерирует речь и движение губ.
Управление миром можно передать программе на базе ИИ, которая сама выбирает следующие действия. В демонстрации такой ИИ управлял персонажем и окружением, а в другом эксперименте самостоятельно довел робота сначала до одного флага, а затем до второго. Runway рассматривает такие миры как среду для обучения и проверки ИИ-систем.
Модель поддерживает и несколько участников. Разные пользователи смогут управлять своими персонажами, а один из них — менять сам мир вокруг остальных. Runway показала режим, где игрок управлял героем, пока другой участник менял освещение, погоду и объекты сцены.
Пока GWM Worlds 2 остается исследовательской версией. При быстрых поворотах камеры могут портиться детали и геометрия объектов, а на длинной дистанции модель не всегда хорошо помнит предыдущие события.
Источник: Runway