OmniPoser восстанавливает движения тела по неполным данным датчиков
Н@GreenNeuralRobotsAI-инженер
1 недOmniPoser восстанавливает недостающие суставы по комбинациям датчиков и выдает готовую модель движения SMPL со скоростью более 700 кадров в секунду.
Одна модель может восстанавливать движение тела даже при неполных данных с датчиков.
- Система поддерживает разные наборы датчиков, включая только голову или пять точек VR.
- Модель достраивает отсутствующие суставы, а не заменяет их нулевыми значениями.
- Заявлена скорость более 700 кадров в секунду и работа в реальном времени на одной видеокарте.
OmniPoser
мокап без маркеров. Но нужны сенсоры или уже извлеченные ключевые точки, модель достраивает недостающие суставы. Пригодится для VR, аватаров, робототехники и анимации.
Раньше под каждый набор сенсоров учили свою модель, здесь одна архитектура на все
• На вход любые комбинации датчиков, включая верх тела, пять точек VR или только голову
• Понимает, каких суставов нет, и достраивает их по смыслу, а не нулями
• Отдает готовый SMPL: поза, форма, контакт стоп с полом, глобальная траектория без дрейфа
• Один шаг генерации, без перебора вариантов
• Больше 700 кадров в секунду
• Реальное время на одной видеокарте
• Точность на уровне специалистов: 32,1 мм на AMASS против 34,8 у RoHM, на Nymeria 21,1 против 59,3
github.com/JamesBridgewater51/omniposer
#mocap
MAX
Кратко (AI)
OmniPoser — модель для восстановления движения тела по разным комбинациям датчиков или уже извлеченных ключевых точек. Она достраивает отсутствующие суставы и выдает готовую модель SMPL с позой, контактом стоп с полом и глобальной траекторией; авторы сообщают о скорости более 700 кадров в секунду и приводят результаты сравнения с RoHM.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖