无标记动捕

不在身上贴标记点，直接从普通视频里恢复人体三维动作。

传统光学动捕要在人身上贴反光标记点，由多台红外相机跟踪，精度高但设备贵、只能在专门场地用。无标记动捕去掉标记点，靠人体姿态估计从一台或几台普通相机的视频里找出关节，再拟合成 3D 骨架或 SMPL 这类参数化人体模型。斯坦福 2023 年的 OpenCap 用两台以上 iPhone 录像，关节角平均误差约 4.5°；浙大的 GVHMR（SIGGRAPH Asia 2024）只用单目视频就能恢复世界坐标系下的人体运动。它在遮挡、快速动作和手指细节上仍不如光学动捕。对具身智能，它让大量人类视频能变成人形机器人的动作参考。

例子用手机拍一段人跳舞的视频，经 GVHMR 恢复成世界坐标系下的 SMPL 动作序列，再重定向到人形机器人的关节上，作为强化学习运动跟踪的参考动作。

也叫

无标记点动作捕捉、视频动捕、视觉动捕

相关

动作捕捉、光学动捕、人体姿态估计、人体网格恢复、SMPL 人体模型、动作重定向

来源

OpenCap: Human movement dynamics from smartphone videos (PLOS Computational Biology, 2023)
GVHMR: World-Grounded Human Motion Recovery via Gravity-View Coordinates (arXiv:2409.06662)