World from Motion реконструирует 4D-сцены из одного видео

Stanford и NVIDIA представили World from Motion: метод 4D-реконструкции из одного видео с открытыми кодом и весами.

Метод позволяет создавать 4D-реконструкции сцены, располагая лишь одним видео.

Видеомодель дополняет виды, которых не хватает в исходной записи.
Сгенерированные кадры дистиллируются обратно в реконструкцию сцены.
Код и веса опубликованы открыто.

World from Motion 4D реконструкция на гауссианах из одного видео. С июля лежало в закладках ждало релиза Stanford и NVIDIA, NeurIPS 2026. World from Motion: 4D из одного видео Stanford и NVIDIA, NeurIPS 2026. Код и веса открыты. • За основу взята реконструкция MoSca. Видеомодель DiffSynth дорисовывает виды с новых камер, потом эти кадры дистиллируются обратно в сцену • То есть реконструкция и генерация работают в паре: где данных не хватает, их добирает видеомодель на базе Wan2.1-VACE-14B github.com/GradientSpaces/World-from-Motion huggingface.co/liyzzz/World-from-Motion Спасибо @m_franz #videoto4d #4d #gaussian MAX

Кратко (AI)

Stanford и NVIDIA представили World from Motion — метод реконструкции 4D-сцены из одного видео, код и веса доступны открыто. Он использует реконструкцию MoSca и видеомодель DiffSynth на базе Wan2.1-VACE-14B, чтобы генерировать виды с новых камер и дополнять сцену там, где исходных данных недостаточно.

World from Motion реконструирует 4D-сцены из одного видео

Кратко (AI)

Обсуждение