11日前

3Dパノラマ座標系における多人数の局所化およびトラッキングに向けたパノラマ動画の活用

Fan Yang, Feiran Li, Yang Wu, Sakriani Sakti, Satoshi Nakamura
3Dパノラマ座標系における多人数の局所化およびトラッキングに向けたパノラマ動画の活用
要約

3Dパノラママルチプレイヤーの局所化および追跡は、多くの応用分野において重要な役割を果たしている。しかし、従来のLiDAR装置を用いた手法は、点群データの処理に起因して経済的に高コストであり、計算効率も劣るという課題を抱えている。本研究では、低コストでありながら効果的かつ効率的な手法を提案する。まず、4台の通常のカメラを用いてパノラマ動画を取得する。次に、カメラの幾何学的特性と人体の生物学的特性(特に身長)を活用して、2Dパノラマ画像座標上の人物位置を3Dパノラマカメラ座標に変換する。最後に、人物の外見特徴と3D軌道を連携させることで、3Dトラックレットを生成する。本手法の有効性は、我々が新たに構築したデータセットを含む3つのデータセットを用いて検証された。評価項目は、3D単視点マルチプレイヤー局所化、3D単視点マルチプレイヤー追跡、および3Dパノラママルチプレイヤー局所化・追跡である。本研究のコードおよびデータセットは、\url{https://github.com/fandulu/MPLT} にて公開されている。