DistScene: генерация 3D-сцен из одного изображения

CoolBeam представили DistScene — систему для создания редактируемых 3D-сцен с объектами и окружением на основе одного изображения.

Технология упрощает создание 3D-контента для игр и симуляторов, позволяя быстро превращать плоские изображения в интерактивные сцены.

Позволяет редактировать объекты внутри сцены по отдельности.
Поддерживает экспорт в симуляторы навигации, что полезно для обучения роботов или разработки игр.
Ускоряет процесс создания 3D-окружения из простых исходных данных.

DistScene Система от CoolBeam: превращает одно изображение в редактируемую 3D-сцену с расставленными объектами и окружением. • Генерация сцены из одного изображения: окружение и объекты вместе • Объект-центричный рефайнмент — восстановление деталей с акцентом на объект • Сцены композиционные: объекты можно редактировать отдельно • Прямой импорт в симуляторы навигации • Интерактивная демка в браузере Как работает • Самодистилляция данных: Trellis.2 генерирует объекты и среды, физик-чеки собирают сцены, рендер даёт conditioning • Два этапа: разреженная структурная генерация + геометрия-латентная генерация • Объект уводится в локальный воксельный саппорт для рефайнмента и возвращается обратно • База — разреженные воксели, разреженный DiT на flow-matching и LoRA huggingface.co/coolbeam/DistScene-preview-assets Спасибо @m_franz #image2scene #imageto3d MAX

Кратко (AI)

Система DistScene от CoolBeam позволяет преобразовывать одно 2D-изображение в полноценную 3D-сцену с возможностью редактирования отдельных объектов. Технология использует самодистилляцию данных и двухэтапный процесс генерации, включая работу с вокселями и flow-matching, что позволяет экспортировать сцены в симуляторы навигации.

DistScene: генерация 3D-сцен из одного изображения

Кратко (AI)

Обсуждение