worldsculptСбросить фильтр ×

WorldSculpt: нейросеть разбирает фото и видео сцены на сотни отдельных 3D-объектов

Alaya Lab и Токийский университет представили открытый фреймворк WorldSculpt, который превращает фотографии или видео насыщенной предметами сцены (комнаты, улицы) в десятки и сотни отдельных 3D-моделей — каждый объект получает свою собственную сетку (мэш), а не сливается в общую геометрию.

Это важно для игр (сборка уровней из реальных интерьеров), AR (система понимает, что перед ней стол, а не безымянная поверхность), дизайна интерьеров (готовый набор ассетов вместо цельной болванки) и робототехники (объект в симуляторе — отдельное тело с массой и границами для отработки захвата).

701объектов в самой плотной тестовой сцене
2.48ошибка CD-ℓ2 у WorldSculpt против 7.42 у ShapeR
0.25медианная ошибка по объектам (было 2.47)

Полный разбор →

Это всё на сейчас.