HyperAIHyperAI

Command Palette

Search for a command to run...

EpO-Net:密集トラジェクトリーデータにおける幾何制約を活用したモーションサリエンシーの検出

Muhammad Faisal Ijaz Akhter Mohsen Ali Richard Hartley

概要

既存の顕著な運動セグメンテーション手法は、幾何学的特徴を明示的に学習できず、特に静止物体に対して誤検出を起こしやすいという課題がある。本研究では、多視点幾何制約を活用することでこうした欠点を回避する。また、海など非剛体な背景を扱うために、運動特徴と外見特徴の間に堅牢な融合機構を提案する。動画内のすべての画素をカバーする密な軌道(dense trajectories)を導入し、それらに基づく「軌道に基づくエピポーラ距離(trajectory-based epipolar distances)」を定義することで、背景領域と前景領域を区別する手法を提案する。このエピポーラ距離はデータに依存せず、画像間の少数の特徴点対応関係が与えられれば容易に計算可能である。本研究では、エピポーラ距離と光流(optical flow)を組み合わせることで、強力な運動ネットワークを学習できることを示す。この2つの特徴をネットワークが同時に活用できるようにするため、シンプルな機構である「入力ドロップアウト(input-dropout)」を提案する。運動特徴のみを用いたネットワークと比較して、DAVIS-2016データセットにおいて平均IoUスコアで従来の最先端手法を5.2%上回ることを実証した。さらに、入力ドロップアウト機構を用いて運動ネットワークと外見ネットワークを堅牢に融合することで、DAVIS-2016、DAVIS-2017、SegTrackv2の各データセットにおいても、既存の手法を上回る性能を達成した。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています