реконструкцияСбросить фильтр ×

InfiniSplat: реконструкция 3D-сцен по одному изображению

Н@GreenNeuralRobotsAI-инженер
3 нед
InfiniSplat Спасаю вас от минимакс-хайпа, пощу на другие темы Реконструкция сцены на гауссианах по одному изображению или по данным с датчика глубины (RGB + Depth), работает при больших смещениях камеры • опирается на монокулярную геометрию, а не на пиксельные сетки • выдает стабильные поверхности при резких сменах вида Гитхаб Демо #gaussian #image2scene #rgbd2scene #depth2scene

Lift4D: открытый код для 4D-реконструкции движущихся объектов из одного видео

Исследователи выпустили фреймворк Lift4Di, который восстанавливает полную 4D-модель динамичного объекта — геометрию, текстуры и нежёсткие деформации во времени — используя только обычное монокулярное видео с одной камеры. Система достраивает даже ракурсы, которые не были видны в исходной съёмке, реконструируя полный 360° обзор объекта.

Код и статья опубликованы в открытом доступе, есть интерактивная демо-страница проекта, где можно самостоятельно покрутить полученную 3D/4D-модель. Работа тестировалась на GPU NVIDIA A100i.

ВыводLift4D реконструирует не только геометрию и текстуры, но и нежёсткие деформации движущихся объектов — то есть отслеживает, как форма объекта меняется во времени

360°полный обзор восстановленной геометрии объекта

Полный разбор →

QuerySplat: реконструкция 3D-сцен без известных позиций камер

Н@GreenNeuralRobotsAI-инженер
3 нед
QuerySplat Реконструкция 3D‑сцен по фото без известных позиций камер. Убирает размытость, типичную для старых query‑методов. • строит гассианы по нескольким изображениям • разделяет геометрию и цвет на две отдельные ветки декодера • работает без привязки к ракурсу съёмки • PSNR на 2.30 дБ выше лучших pose‑free методов • на DL3DV лучший результат в синтезе новых видов Использует Vision Geometric Model как источник 3D‑приоров. Разделение веток снижает артефакты и повышает детализацию. Гитхаб HF #gaussian #image2scene #scenereconstruction

Google представила SHELLS: систему для быстрой 3D-реконструкции головы

М@cgeventAI-инженер
1 мес

SHELLS: топологически согласованная 3D-реконструкция головы

Н@GreenNeuralRobotsAI-инженер
1 мес
SHELLS: Topologically Consistent Multi-view 3D Head Reconstruction via Coarse-Guided Layered Surface Sampling Реконструкция 3D‑головы с текстурами от Google по нескольким видам. Держит топологию, избегает артефактов Сразу пригодная для анимации топология Точность до субмиллиметровых деталей. Жрет 2.4 GB VRAM. Но это VRAM у кого надо VRAM. Кода-весов нет #head #HMR #imageto3d #photogrammetry

Glob3R: новая система для 3D-реконструкции сцен

Н@GreenNeuralRobotsAI-инженер
1 мес

StudioRecon: реконструкция 4D-сцен с людьми по 4 камерам

Н@GreenNeuralRobotsAI-инженер
1 мес
StudioRecon Реконструкция 4D-сцены с людьми по 4 камерам с малым перекрытием. Разделяя фон и людей, убирает артефакты в слабо наблюдаемых зонах. Работает на скудных данных, дает стабильный рендер с произвольных ракурсов. • видео-диффузия насыщает фон новыми видами • SMPL фиксирует геометрию людей • рекурсивный модуль выравнивает движение и стыки Код / веса ждем #videoto4d #gaussian #4d #video2scene #hmr

PixWorld: 3D-генерация и реконструкция в пиксельном пространстве

Н@GreenNeuralRobotsAI-инженер
1 мес
PixWorld 3D-генерация и реконструкция в пиксельном пространстве. Решает проблему потерь деталей из-за латентных автоэнкодеров, дает четкую геометрию. На выходе RGBD и гауссова сцена Cоздание и восстановление 3D, без VAE. Высокая скорость за счет архитектуры и стратегии сэмплирования. Судя по последнему пейзажу с горой, генерирует по тексту слабее чем по картинке или набору ракурсов • работает напрямую с рендеренными изображениями • генерация сцены за ~0.6 с - до 1000x быстрее аналогов Гитхаб - ждем код и 4-шаговую дистиллированную модель #gaussian #image2rgbd #image2scene #scenereconstruction

GenRecon: реконструкция 3D-сцен по изображениям

Н@GreenNeuralRobotsAI-инженер
1 мес
GenRecon Реконструкция 3D-сцен по небольшому набору изображений Процесс такой: восстановление поз камер, разделение сцены на перекрывающиеся 3D-чанки, создание глобальной 3D-сетки для условий генерации и объединение всех чанков в общем латентном пространстве На выходе высококачественный 3D-меш с PBR-материалами, пригодный для реалистичного релайтинга и редактирования Прикручено к TRELLIS2 Гитхаб #imageto3d #scenereconstruction #pbr

Это всё на сейчас.