Исследователи Imperial College представили Dense4D — feed-forwardi модель для плотной 4D-реконструкции человека по обычным монокулярным RGB-кадрам, без шаблона тела. Она связывает точки поверхности между кадрами, несмотря на движения, деформации и изменения видимости.

Модель нацелена на проблему, при которой существующие методы получают несколько смещённых копий тела — по одной на кадр. В тесте 4D-Dress Dense4D лучше согласуется со сканами даже тогда, когда опорный кадр показывает лишь часть тела.

• Dense4D присваивает каждому пикселю человека 3D-позицию поверхности на общем опорном времени, формируя Human Point Mapsi (HPM).
• Модель совместно обрабатывает вырезки человека с известными преобразованиями и предсказывает глубину.
• Amodal-соответствиеi позволяет находить в других кадрах точки, скрытые в опорном кадре.
• Совпадение координат HPM устанавливает соответствия без поз камеры и больших смещений сцены.