MiniMax представила H3 — новую модель для создания коротких видео. Она сможет генерировать ролики длиной от 4 до 15 секунд в разрешении до 2K и сразу добавлять к ним стереозвук.
Главная идея H3 в том, что модель сможет работать не только с текстовым описанием. Пользователь сможет собрать одно задание из нескольких источников сразу: например, взять персонажа с картинки, движение камеры из другого видео и аудиодорожку, под которую нужно синхронизировать сцену. MiniMax обещает, что модель сможет учитывать текст, изображения, видео и звук как одну задачу, а не как набор отдельных команд.
За счет этого H3 должна закрыть несколько типовых сценариев, для которых раньше приходилось использовать разные инструменты. С ее помощью можно будет делать видео по тексту, оживлять изображение, строить сцену по первому и последнему кадру, сохранять внешний вид персонажа, переносить движение и править ролик по инструкции.
MiniMax уже открыла доступ к H3 через свой API и приложение Hailuo AI. Компания называет среди основных сценариев рекламу, брендовый контент, видео для интернет-магазинов, продуктовый дизайн, игровые ролики и черновики сцен для кино.
Источник: MiniMax