17일 전

비지도 광류에서 중요한 요소는 무엇인가

Rico Jonschkowski, Austin Stone, Jonathan T. Barron, Ariel Gordon, Kurt Konolige, Anelia Angelova
비지도 광류에서 중요한 요소는 무엇인가
초록

무 supervising된 광류(unsupervised optical flow)의 핵심 구성 요소들을 체계적으로 비교 및 분석하여, 어떤 광학적 손실(photometric loss), 음영 처리(occlusion handling), 그리고 부드러움 정규화(smoothness regularization)가 가장 효과적인지 규명한다. 본 연구에서는 이러한 분석을 바탕으로 무 supervising된 흐름 모델에 대한 여러 새로운 개선 방안을 제안한다. 예를 들어, 비용 볼륨(cost volume) 정규화, 음영 마스크에서의 그래디언트 정지, 흐름 필드의 업샘플링 이전에 부드러움을 유도하는 전략, 그리고 이미지 리사이징을 통한 지속적인 자기지도 학습(self-supervision)이 포함된다. 본 연구의 분석 결과와 개선된 모델 구성 요소들을 종합함으로써, 기존의 무 supervising 기반 최고 성능 기법을 크게 능가하면서도, KITTI 2015 데이터셋에서 감독 학습 기반의 FlowNet2와 비슷한 성능을 달성하는 새로운 무 supervising 광류 기법을 제시한다. 동시에 기존의 유사한 접근보다 훨씬 간단한 구조를 갖추고 있다.