統一された多視点多人数追跡フレームワーク

3次元マルチビュー・マルチパーソン追跡（3D MM-トラッキング）において著しい進展が見られますが、現在の3D MM-トラッキングフレームワークは、足跡追跡と姿勢追跡のために別々に設計されています。具体的には、足跡追跡用に設計されたフレームワークは3次元姿勢追跡には利用できないため、これらは地面平面上の3次元位置をホモグラフィ投影によって直接取得しますが、これは地上にある3次元姿勢には適用できません。一方、姿勢追跡用に設計されたフレームワークは一般的にマルチビューとマルチフレームの関連付けを分離しており、足跡追跡に対して堅牢性が不足する可能性があります。なぜなら、足跡追跡では姿勢追跡よりも少ないキーポイントを使用するため、単一のフレーム内のマルチビュー関連付けの手がかりが弱まってしまうからです。本研究では、これらのギャップを埋めるために統合型マルチビュー・マルチパーソン追跡フレームワークを提案します。このフレームワークは特別な変更なしで、単眼2次元バウンディングボックスと2次元姿勢を入力として受け取り、複数人の堅牢な3次元軌道を生成することができます。特に重要な点は、マルチフレームとマルチビュー情報が共同して利用されることで、関連付けと三角測量の性能向上に寄与することです。我々のフレームワークの有効性は、CampusデータセットおよびShelfデータセットにおける3次元姿勢追跡での最先端性能の達成により確認されるとともに、WILDTRACKデータセットおよびMMPTRACKデータセットにおける3次元足跡追迹でも同等の結果を得ています。