segmentationСбросить фильтр ×

IGGT4D: онлайн-понимание 4D-сцен в видеопотоке

Н@GreenNeuralRobotsAI-инженер
1 мес
IGGT4D Онлайн-понимание 4D-сцен в видеопотоке. Строит единую модель сцены на лету - геометрия, движение камеры, объекты. • сегментирование и олтслеживание объектов, глубина • обрабатывает кадры по очереди • переиспользует прошлый контекст через causal spatial-temporal modeling. Всю историю не хранит для экономии памяти • обновляет представление сцены инкрементально • чётко выделяет отдельные объекты. код / веса ждем #vlm #tracking #segmentation #videoto4d #vidfeo2depth

SAM2Matting: опенсорсный аналог CorridorKey от Corridor Crew для матирования изображений и видео

Вышла опенсорсная модель SAM2Matting — генерализованное решение для матирования (matting) изображений и видео, построенное на основе SAM2 и SAM3. Авторы называют её ответом на коммерческий инструмент CorridorKeyi от студии Corridor Crew.

В отличие от обычной сегментации, матирование сохраняет информацию о мягких и полупрозрачных краях объекта (например, волосы, дым, стекло), что критично для ротоскопинга и композитинга в видеопродукции.

Полный разбор →

SAM-MT: мультизадачная сегментация в реальном времени

Н@GreenNeuralRobotsAI-инженер
1 мес
SAM-MT Мультизадачная версия SAM для сегментации - отслеживает одновременно несколько целей. Адаптация под разные типы данных и сценарии без переобучения. • рилтайм: 36+ fps при 10 целях на одном RTX A6000 • работа с разными типами изображений и модальностей • улучшенная сегментация сложных объектов • экономия памяти при инференсе Гитхаб HF #segmentation #tracking #realtime

Instok3D: генерация 3D-сцен из обычных фотографий

Н@GreenNeuralRobotsAI-инженер
1 мес
Instok3D Модель для 3D-сцен из обычных фото. Вычленяет объекты в структурированные группы токенов, не требует 3D-разметок. • декомпозиция сцен в группы токенов по инстансам • нативная идентификация объектов • реконструкция, сегментация, манипуляции за один проход Feed-forward архитектура. Работает с непозиционированными изображениями. Код ждем #segmentation3D #3d #imageto3d

Это всё на сейчас.