WorldCrafter: видеомодель с 3D-памятью
Н@GreenNeuralRobotsAI-инженер
1 месWorldCrafter
Видеомодель мира с неявной 3D-памятью. Видеогенераторы теряют мир, когда камера отворачивается - WorldCrafter запоминает сцену и восстанавливает ее при возврате
• исследование мира с одной картинки
• генерация мира из текста + управление камерой
• возврат к знакомым ракурсам
• синтез новых ракурсов из нескольких изображений
• реалтайм-стриминг
• минуты исследования сцен, статика и динамика
Доказательство: из сгенерированных видео реконструируют point clouds - геометрия и позы камер сходятся при повторных проходах
Гитхаб
HF
#world #t2w #i2w
MAX