Исследователи выпустили фреймворк Lift4Di, который восстанавливает полную 4D-модель динамичного объекта — геометрию, текстуры и нежёсткие деформации во времени — используя только обычное монокулярное видео с одной камеры. Система достраивает даже ракурсы, которые не были видны в исходной съёмке, реконструируя полный 360° обзор объекта.

Код и статья опубликованы в открытом доступе, есть интерактивная демо-страница проекта, где можно самостоятельно покрутить полученную 3D/4D-модель. Работа тестировалась на GPU NVIDIA A100i.

• Lift4D реконструирует не только геометрию и текстуры, но и нежёсткие деформации движущихся объектов — то есть отслеживает, как форма объекта меняется во времени
• Фреймворк достраивает невидимые в исходном видео ракурсы, формируя полный 360° обзор объекта
• Доступны Project Page (интерактивный просмотр), статья на arXiv и репозиторий с кодом
• По данным канала «Нейронавт», код протестирован на GPU NVIDIA A100