空間的アテンション付きパッチ階層ネットワークによる適応型モーションデブラーイング

本稿では、動的シーンにおける運動ぼかしの復元問題に取り組む。近年、エンドツーエンドの完全畳み込み型設計により、非一様な運動ぼかしの復元において、性能が著しく向上しているが、その性能と計算複雑さのトレードオフは依然として最適ではない。従来の手法は、受容 field を拡大するために一般的な畳み込み層の数やカーネルサイズを増加させているが、これによりモデルサイズの増大および推論速度の低下という副作用が生じている。本研究では、空間的に異なる位置における大きなぼかしの変動に対応するため、効率的なピクセル適応型かつ特徴注意機構を提案する。また、各テスト画像に対して適応的に処理を行うため、コンテンツに応じたグローバル・ローカルフィルタリングモジュールを導入し、グローバルな依存関係に加え、動的に隣接ピクセルの情報を活用することで、性能を顕著に向上させている。さらに、上記モジュールを組み合わせたパッチ階層型注意機構を採用することで、入力画像に内在するぼかしの空間的変動を暗黙的に捉え、中間特徴量に対して局所的・グローバルな調整を実現している。ぼかし復元ベンチマークにおいて、従来手法と比較して広範な定性的・定量的評価を行い、本設計が最新の技術と比較して、精度および処理速度の両面で顕著な向上を達成していることを示している。