World Labs представили модель для 3D-реконструкции сцен
C@CGIT_Vinesгеймдев
1 месWorld Labs показали технологию, которая объединяет видео с нескольких смартфонов для создания полноценной 3D-сцены на основе гауссианов.
Технология позволяет создавать качественные 3D-модели окружения из обычных видео, снятых на смартфон.
- Упрощает создание 3D-контента для разработчиков и видеографов.
- Позволяет генерировать новые ракурсы и траектории камеры из исходных данных.
- Демонстрирует прогресс в области нейронного рендеринга и работы с гауссианами.
Впечатляющая работа от World Labs
Работает так, что соединяет данные с разных источников и пытается реконструировать сцену в трехмерном представлении. К примеру, данное видео было снято одним дублем с трех мобильных телефонов. Далее все сгружено в модель которая реконструировала сцену и дала возможность полетать камерой по заданной траектории, записать дополнительные секвенции и получить новые кадры.
Модель сама достраивает недостающие части мира, если конечно, у нее хватает данных, а то вы сами понимаете что она там достроит. Работает на гауссианах. Им бы еще хорошую сегментацию прикрутить, вообще не было бы цены.
В общем обязательно идите по ссылке, там примеры вообще отвал жопы/
@CGIT_Vines
Кратко (AI)
Компания World Labs представила технологию, позволяющую реконструировать трехмерные сцены на основе видео, снятых с нескольких мобильных телефонов. Модель использует гауссианы для построения пространства и способна достраивать недостающие детали сцены.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖