摘要
在存在严重遮挡、人体各部位（从躯干到面部与双手）重建粒度差异显著、观测尺度剧烈变化以及快速身体运动等复杂情况下，多人体全身体运动捕捉仍面临巨大挑战。为应对上述难题，本文提出一种仅依赖稀疏多视角摄像头的轻量级全身体运动捕捉系统，适用于多人交互场景。通过引入一种新颖的手部与面部自举（bootstrapping）算法，本方法能够在严重遮挡条件下仍实现手部与面部的高效定位与精确关联。我们结合姿态回归与关键点检测方法，并进一步提出一种统一的两阶段参数化拟合方法，以实现像素级对齐的高精度重建。此外，针对极端自遮挡姿态及近距离交互场景，本文设计了一种新型反馈机制，可将当前帧的像素级重建结果传递至下一帧，从而提升关联精度。总体而言，本文首次构建了一个轻量级全身体运动捕捉系统，在保持高效性的同时，实现了快速、鲁棒且精确的多人全身体运动捕捉。实验结果表明，在稀疏视角设置下，本方法在各项指标上均优于现有主流方法。