2 个月前
面向部件的测量方法用于鲁棒的多视图多人3D姿态估计与跟踪
Chu, Hau ; Lee, Jia-Hong ; Lee, Yao-Chih ; Hsu, Ching-Hsien ; Li, Jia-Da ; Chen, Chu-Song

摘要
本文介绍了一种基于校准多视图的多人3D姿态估计与跟踪方法。主要挑战在于即使在多个姿态估计存在噪声的情况下,仍能正确找到跨视图和时间上的对应关系。与以往从多个视角构建3D姿态的方法相比,我们的方法利用了时间一致性,在每个视角中将估计的2D姿态与之前构建的3D骨架进行匹配。因此,跨视图和时间上的关联可以同时完成。由于错误的关联和噪声预测会影响性能,我们设计了两种策略以提高对应关系和3D重建的质量。具体而言,我们提出了一种基于部位感知的2D-3D关联度量方法(part-aware measurement),以及一种能够在重建过程中处理2D异常值的滤波器(filter)。我们的方法在效率和效果上均优于现有最先进的方法;在两个基准测试集上取得了具有竞争力的结果:Campus数据集上的准确率为96.8%,Shelf数据集上的准确率为97.4%。此外,我们将Campus数据集的评估帧数延长以增加难度,我们的方法仍然表现良好。