Выход Wan-Animate-2: новая модель для анимации персонажей

Обзор Wan-Animate-2: модель для анимации персонажей с поддержкой текстового управления камерой и облегченной версией для рилтайм-стриминга.

Технология позволяет создавать качественные цифровые аватары в реальном времени.

Улучшенная стабильность внешности персонажа при сложных движениях.
Возможность независимого управления камерой через текст.
Поддержка рилтайм-генерации для стриминга и интерактивных аватаров.

Wan-Animate-2 Новая версия персонажного одиалятора без привычных костылей вроде отдельных экстракторов движения - видео-драйвер идет прямо в трансформер, и это дрейф идентичности персонажа при сложных движениях. Ракурс камеры можно задать текстом, независимо от исходного видео. Раньше камера была жёстко привязана к драйверу, тут её отвязали. Есть облегчённая версия для рилтайма: обучена трёхэтапно, включая дистилляцию с поблочным обратным распространением, и держит задержку на уровне живого стрима - то есть цифровые аватары и ведущие трансляций уже не про офлайн-рендер Гитхаб HF А также https://huggingface.co/Comfy-Org/Wan-Animate-2/tree/main https://github.com/Comfy-Org/workflow_templates/blob/main/templates/video_wan2_2_14B_animate.json #wananimate2 #characteranimation #pose2video

Кратко (AI)

Представлена модель Wan-Animate-2 для анимации персонажей, которая интегрирует видео-драйвер непосредственно в трансформер, минимизируя искажения идентичности. Новая версия позволяет управлять ракурсом камеры через текстовые промпты и включает облегченную версию для работы в режиме реального времени.

Выход Wan-Animate-2: новая модель для анимации персонажей

Кратко (AI)

Обсуждение