← к ленте

Google представила SHELLS: систему для быстрой 3D-реконструкции головы

М@cgeventAI-инженер
1 мес

Обзор исследовательской системы Google SHELLS для автоматической реконструкции 3D-головы и её сравнение с инструментом FaceBuilder от KeenTools.

Технология позволяет автоматизировать создание 3D-аватаров в реальном времени, что ускоряет производство контента для кино и игр.

  • Высокая скорость обработки (0,08 сек) делает систему пригодной для захвата мимики в реальном времени.
  • Система требует профессионального оборудования с откалиброванными камерами, в отличие от пользовательских решений.
  • Технология пока является исследовательской и не имеет публичного кода или инструментов для текстурирования.
SHELLS: Facebuilder от Гугла. Но не совсем. SHELLS - исследовательская система Google для автоматической реконструкции 3D-головы по нескольким фотографиям с известных ракурсов. Она создает сетку примерно из 18 тысяч вершин с единой топологией и обрабатывает один набор изображений примерно за 0,08 секунды(!) Главное преимущество SHELLS - скорость и стабильность. Система подходит для многокамерной съемки, захвата мимики и массовой обработки видео. При этом она требует откалиброванных камер и пока не является готовым продуктом: публичного кода нет, текстуры, волосы и мелкие детали кожи нужно восстанавливать отдельно. С FaceBuilder от KeenTools задачи пересекаются, но сценарии разные. FaceBuilder - инструмент для Blender и Nuke, рассчитанный на художника. Он работает даже с обычными фотографиями, позволяет вручную корректировать модель, строить текстуры и экспортировать результат в другие 3D-пакеты. SHELLS больше подходит студиям с многокамерными установками и автоматизированным производством. FaceBuilder - создание конкретного персонажа из нескольких фотографий с ручной доводкой. Страница проекта SHELLS https://syntec-research.github.io/SHELLS/ Статья на arXiv https://arxiv.org/abs/2605.31283 "FaceBuilder для Blender" https://keentools.io/products/facebuilder-for-blender "FaceBuilder для Nuke" https://keentools.io/products/facebuilder-for-nuke @cgevent

Кратко (AI)

Google представила исследовательскую систему SHELLS, способную реконструировать 3D-модель головы по нескольким фотографиям за 0,08 секунды. В отличие от инструмента FaceBuilder, ориентированного на ручную работу художников в Blender и Nuke, SHELLS предназначена для автоматизированных студийных систем с многокамерной съемкой.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖