Контроль движений, возможно, наконец, станет недостающим элементом в генерации видео с использованием ИИ.

Недавно попробовал новый инструмент синтеза видео, и результаты действительно впечатляют. Он справляется со сложными движениями, которые обычно ломают другие модели видео-видео - протестировал его на сложных последовательностях, таких как гимнастика, и он оставался последовательным на протяжении всего времени.

Помимо сырого движения, это действительно уделяет внимание деталям: точная синхронизация губ в диалогах, плавное отслеживание камеры, которое не кажется роботизированным. Точность здесь является настоящим шагом вперед.

Для всех, кто работает в области ИИ-видео или занимается синтетическими медиапайплайнами, это представляет собой значительный прогресс в точности движения. Планка только что поднялась выше.