MatAnyone-E ускоряет матирование видео до 28,6 кадра/с в 4K
Н@GreenNeuralRobotsAI-инженер
17 чMatAnyone-E выполняет матирование видео в 4K со скоростью 28,6 кадра/с и использует около 3,1 ГБ пиковой памяти.
Более быстрое матирование может упростить создание композитинга и замену фона в видео.
- В 4K заявлена скорость 28,6 кадра/с.
- Обработка выполняется в нативном разрешении, без уменьшения видео.
- Пиковое потребление памяти составляет около 3,1 ГБ.
MatAnyone-E
Быстрое матирование видео, на уровне прошлой версии
Сначала дешевый проход в низком разрешении, он подсказывает, где маска не уверена и какие участки памяти важны. Полное сопоставление идет только по этим местам, остальное берется из низкого разрешения. Декодер заменили на легкий
• Полноценная альфа для человека в кадре, согласованная между кадрами
• Тонкие края и сложная прозрачность
• Работа в нативном разрешении, без даунскейла
• Пригодно для композитинга, VFX и замены фона
• 73 кадра в секунду в 1080p на одной H200 с torch.compile
• 28,6 кадра в секунду в 4K
• В 7,4 раза быстрее MatAnyone 2 на 4K
• Пиковой памяти ~ 3,1 ГБ
Код ждем
Спасибо @m_franz
#segmentation #matting #video2matte #video2mask #realtime
MAX
Кратко (AI)
MatAnyone-E — модель для быстрого матирования видео с согласованной между кадрами альфой и обработкой в нативном разрешении. Заявлены скорость 73 кадра/с в 1080p и 28,6 кадра/с в 4K на одной H200; код пока ожидается.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖