Вышла опенсорсная модель SAM2Matting — генерализованное решение для матирования (matting) изображений и видео, построенное на основе SAM2 и SAM3. Авторы называют её ответом на коммерческий инструмент CorridorKeyi от студии Corridor Crew.
В отличие от обычной сегментации, матирование сохраняет информацию о мягких и полупрозрачных краях объекта (например, волосы, дым, стекло), что критично для ротоскопинга и композитинга в видеопродукции.
- Модель представлена в трёх вариантах: SAM2.1-T, SAM2.1-B+ и SAM3
- По данным источника, вариант на базе SAM3 показывает лучшие результаты среди всех трёх
- Поддерживаются разные типы промптов: маски, точки, боксы и текстовые запросы
- Модель обучена только на изображениях, но уверенно работает и на видео
- Опубликованы код, демо, страница на HuggingFace и страница проекта henghuiding.com/SAM2Matting/
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖