Code as Worlds: VLM-агент для генерации физических симуляций
Н@GreenNeuralRobotsAI-инженер
1 месCode as Worlds
VLM-агент, который пишет код симуляции физики на каждом шаге генерации видео
- Смотрит видео и пишет код сцены: объекты, их свойства, отношения, правила движения, камера, освещение
- Код в симуляторе проверяет как изменится сцена если поменять параметры
- Композиция: можно разобрать сцену на части и менять части
- Отделяет физическое состояние от внешнего вида — знает, что тяжёлый предмет не зависит от того, какого он цвета
Гитхаб
HF
Демо
#vlm #simulation #t2v #physics
VK | MAX