2 个月前

统一的多视角多人跟踪框架

Yang, Fan ; Odashima, Shigeyuki ; Yamao, Sosuke ; Fujimoto, Hiroaki ; Masui, Shoichi ; Jiang, Shan
统一的多视角多人跟踪框架
摘要

尽管在三维多视角多人跟踪(3D MM-Tracking)方面取得了显著进展,但目前的3D MM-Tracking框架分别设计用于足迹跟踪和姿态跟踪。具体而言,设计用于足迹跟踪的框架无法应用于三维姿态跟踪,因为它们通过单应性投影直接获取地面平面上的三维位置,而这种方法不适用于高于地面的三维姿态。相反,设计用于姿态跟踪的框架通常会隔离多视角和多帧关联,可能对足迹跟踪不够鲁棒,因为足迹跟踪使用的关节点少于姿态跟踪,这削弱了单帧中的多视角关联线索。本研究提出了一种统一的多视角多人跟踪框架,以弥合足迹跟踪和姿态跟踪之间的差距。该框架无需额外修改即可采用单目2D边界框和2D姿态作为输入,生成多个人员的稳健三维轨迹。重要的是,多帧和多视角信息被联合利用以提高关联和三角化的性能。我们的框架的有效性通过在Campus和Shelf数据集上实现最先进的3D姿态跟踪性能以及在WILDTRACK和MMPTRACK数据集上取得可比的3D足迹跟踪结果得到了验证。

统一的多视角多人跟踪框架 | 最新论文 | HyperAI超神经