무약한 비일치 자유형 적응형 특징 정렬을 통한 무인 항공기 기반 다중 모달 객체 탐지

가시광-적외선(RGB-IR) 이미지 융합은 무인 항공기(UAV) 기반 객체 탐지에 있어 큰 잠재력을 보여주고 있다. 그러나 다중 모달 이미지 쌍 간의 약한 비일치 문제는 객체 탐지 성능을 제한하는 주요 요인으로 작용한다. 기존의 대부분의 방법들은 모달 간 차이를 무시하고 엄격한 정렬을 강조함으로써 정렬 품질의 상한선을 형성하고, 구현 비용 또한 증가시키는 문제가 있다. 이러한 문제를 해결하기 위해, 본 연구에서는 다중 모달 특징 간 상대 위치를 적응적으로 조정할 수 있는 새로운 방법인 Offset-guided Adaptive Feature Alignment(OAFA)를 제안한다. 모달 간 차이가 교차 모달 공간 매칭에 미치는 영향을 고려하여, 정밀한 특징 수준의 오프셋을 추정하기 위해 Cross-modality Spatial Offset Modeling(CSOM) 모듈을 설계하였다. 이후, 엄격한 정렬을 수행하는 대신 객체 탐지 작업을 위한 최적의 융합 위치를 암묵적으로 포착할 수 있도록 Offset-guided Deformable Alignment and Fusion(ODAF) 모듈을 활용한다. 광범위한 실험 결과를 통해 제안하는 방법이 UAV 기반 객체 탐지 과제에서 최신 기술 수준의 성능을 달성함과 동시에 약한 비일치 문제에 대해 뛰어난 강건성을 보임을 입증하였다.