2ヶ月前

フレーム内オブジェクト追跡によるブラー除去

Jan Kotera; Denys Rozumnyi; Filip Šroubek; Jiří Matas
フレーム内オブジェクト追跡によるブラー除去
要約

高速で複雑な軌道を描いて移動する物体は、特にスポーツの映像において頻繁に現れます。これらの物体は、単一フレームの露光時間中に無視できない距離を移動し、したがってフレーム内の位置が明確に定義されません。運動ブラーにより半透明の線として現れ、標準的な追跡器では信頼性のある追跡が困難です。本研究では、運動ブラーが物体のフレーム内軌道と直接関連しているという観察に基づき、Deblattingによる追跡(Tracking by Deblatting)という新しい手法を提案します。ブラーは、盲目的除ブラー(blind deblurring)と画像マッティング(image matting)という二つの相互に関連する逆問題を解くことで推定され、これをDeblattingと呼びます。その後、物理的に正当化可能な軌道をモデル化する区分2次曲線をフィットさせることで軌道が推定されます。その結果、提案手法によって追跡された物体は、従来の追跡器よりも高い時間分解能で正確に局在化されます。提案されたTbD追跡器は、高速カメラを使用して得られた真値を持つ新規データセット上で評価されました。評価には新たなTrajectory-IoUメトリクスを使用しました。これは伝統的なIntersection over Unionを一般化し、フレーム内軌道の精度を測定します。提案手法はベースラインに対して再現率および軌道精度において優れた性能を示しました。

フレーム内オブジェクト追跡によるブラー除去 | 最新論文 | HyperAI超神経