2ヶ月前

対称パララックス注意机制を用いたステレオ画像の超解像処理

Yingqian Wang; Xinyi Ying; Longguang Wang; Jungang Yang; Wei An; Yulan Guo
対称パララックス注意机制を用いたステレオ画像の超解像処理
要約

近年、ステレオ画像の超解像(SR)技術において大きな進歩が見られましたが、両眼システムが提供する有益な情報は十分に活用されていません。ステレオ画像は極線制約下で高い対称性を持つため、本論文では、ステレオ画像ペア内の対称性ヒントを活用することでステレオ画像SRの性能を向上させる方法を提案します。具体的には、対称双方向視差注意モジュール(Symmetric Bi-directional Parallax Attention Module: biPAM)とインライン遮蔽処理スキームを提案し、視点間の情報を効果的に相互作用させます。次に、biPAMを搭載したシアムネットワークを設計し、両方の視点を高対称性で超解像します。最後に、いくつかの照度ロバスト損失関数を設計してステレオの一貫性を強化します。4つの公開データセットでの実験結果により、本手法の優れた性能が示されています。ソースコードは https://github.com/YingqianWang/iPASSR で入手可能です。

対称パララックス注意机制を用いたステレオ画像の超解像処理 | 最新論文 | HyperAI超神経