Google представила SHELLS: систему для быстрой 3D-реконструкции головы
М@cgeventAI-инженер
1 месОбзор исследовательской системы Google SHELLS для автоматической реконструкции 3D-головы и её сравнение с инструментом FaceBuilder от KeenTools.
Технология позволяет автоматизировать создание 3D-аватаров в реальном времени, что ускоряет производство контента для кино и игр.
- Высокая скорость обработки (0,08 сек) делает систему пригодной для захвата мимики в реальном времени.
- Система требует профессионального оборудования с откалиброванными камерами, в отличие от пользовательских решений.
- Технология пока является исследовательской и не имеет публичного кода или инструментов для текстурирования.
SHELLS: Facebuilder от Гугла.
Но не совсем.
SHELLS - исследовательская система Google для автоматической реконструкции 3D-головы по нескольким фотографиям с известных ракурсов. Она создает сетку примерно из 18 тысяч вершин с единой топологией и обрабатывает один набор изображений примерно за 0,08 секунды(!)
Главное преимущество SHELLS - скорость и стабильность. Система подходит для многокамерной съемки, захвата мимики и массовой обработки видео. При этом она требует откалиброванных камер и пока не является готовым продуктом: публичного кода нет, текстуры, волосы и мелкие детали кожи нужно восстанавливать отдельно.
С FaceBuilder от KeenTools задачи пересекаются, но сценарии разные. FaceBuilder - инструмент для Blender и Nuke, рассчитанный на художника. Он работает даже с обычными фотографиями, позволяет вручную корректировать модель, строить текстуры и экспортировать результат в другие 3D-пакеты.
SHELLS больше подходит студиям с многокамерными установками и автоматизированным производством.
FaceBuilder - создание конкретного персонажа из нескольких фотографий с ручной доводкой.
Страница проекта SHELLS https://syntec-research.github.io/SHELLS/
Статья на arXiv https://arxiv.org/abs/2605.31283
"FaceBuilder для Blender" https://keentools.io/products/facebuilder-for-blender
"FaceBuilder для Nuke" https://keentools.io/products/facebuilder-for-nuke
@cgevent
Кратко (AI)
Google представила исследовательскую систему SHELLS, способную реконструировать 3D-модель головы по нескольким фотографиям за 0,08 секунды. В отличие от инструмента FaceBuilder, ориентированного на ручную работу художников в Blender и Nuke, SHELLS предназначена для автоматизированных студийных систем с многокамерной съемкой.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖