2달 전

공유 결합-브리지 for 약간 감독된 국소 특징 학습

Sun, Jiayuan ; Zhu, Jiewen ; Ji, Luping
공유 결합-브리지 for 약간 감독된 국소 특징 학습
초록

희소 국부 특성 추출은 동시 정위 및 매핑, 이미지 매칭, 3차원 재구성 등 일반적인 비전 작업에서 중요한 의미를 갖는 것으로 널리 알려져 있습니다. 현재까지도 이 기술에는 더 개선이 필요한 몇 가지 부족한 점이 존재하며, 주로 추출된 국부 설명자의 식별력, 검출된 키포인트의 위치 결정 정확도, 그리고 국부 특성 학습의 효율성이 포함됩니다. 본 논문에서는 카메라 포즈 감독을 활용하여 최근 인기 있는 희소 국부 특성 학습을 개선하는 데 초점을 맞추고 있습니다. 이를 위해 약간의 감독을 받는 국부 특성 (SCFeat) 학습에 대해 네 가지 가벼우면서도 효과적인 개선 사항을 제안하는 공유 결합-브릿지 방안(Shared Coupling-bridge scheme)을 제시합니다. 주요 내용은 다음과 같습니다: i) 국부 설명자 학습을 위한 \emph{특성 융합 ResUNet 백본}(Feature-Fusion-ResUNet Backbone, F2R-Backbone), ii) 설명망과 검출망의 분리 학습을 개선하기 위한 공유 결합-브릿지 정규화(shared coupling-bridge normalization), iii) 키포인트를 검출하기 위한 피크니스 측정을 통합한 개선된 검출망, iv) 특성 검출 학습을 더욱 최적화하기 위한 기본 행렬 오류를 보상 요소(fundamental matrix error as a reward factor)로 사용합니다. 광범위한 실험 결과가 증명하듯이, 우리의 SCFeat 개선 방안은 효과적입니다. 전통적인 이미지 매칭과 시각적 정위에서 종종 최신 성능을 달성할 수 있으며, 3차원 재구성에서도 여전히 경쟁력 있는 결과를 얻습니다. 공유와 소통을 위해, 우리 소스 코드는 https://github.com/sunjiayuanro/SCFeat.git 에서 제공됩니다.

공유 결합-브리지 for 약간 감독된 국소 특징 학습 | 최신 연구 논문 | HyperAI초신경