Command Palette
Search for a command to run...
ドメイン適応検出Transformerにおける転移性の向上
ドメイン適応検出Transformerにおける転移性の向上
Kaixiong Gong Shuang Li Shugang Li Rui Zhang Chi Harold Liu Qiang Chen
概要
DETRスタイルの検出器は、ドメイン内(in-domain)の設定において優れた性能を発揮するが、ドメインシフト設定におけるその特性についてはまだ十分に調査されていない。本論文では、2つの観察に基づき、ドメインシフト設定においてシンプルでありながら効果的なベースラインを、DETRスタイルの検出器を用いて構築することを目的としている。第一に、バックボーンおよびデコーダ出力特徴量におけるドメインシフトを緩和することで、良好な結果が得られることである。第二に、これらの領域における高度なドメイン整合手法を導入することで、さらなる性能向上が可能となることである。したがって、バックボーン出力および検出器出力における包括的なドメイン整合を実現するため、オブジェクト認識型整合(Object-Aware Alignment; OAA)モジュールと、最適輸送に基づく整合(Optimal Transport based Alignment; OTA)モジュールを提案する。OAAモジュールは、バックボーン出力において擬似ラベルによって特定された前景領域を対象に整合を行うことで、ドメイン不変な特徴量を生成する。一方、OTAモジュールは、スライス Wasserstein 距離を用いることで、デコーダ出力における位置情報の保持を最大化しつつ、ドメイン間のギャップを最小化する。これらの観察結果および整合モジュールを統合した適応手法を実装し、DETRスタイルの検出器がドメインシフト設定においてどのような性能を発揮するかをベンチマークした。様々なドメイン適応シナリオにおける実験により、本手法の有効性が検証された。