2달 전
대칭적 시차 주의력(Symmetric Parallax Attention)을 이용한 스테레오 이미지 초해상화
Yingqian Wang; Xinyi Ying; Longguang Wang; Jungang Yang; Wei An; Yulan Guo

초록
최근 몇 년 동안 입체 이미지 초해상화(SR) 분야에서 큰 발전이 이루어졌지만, 양안 시스템이 제공하는 유익한 정보는 충분히 활용되지 않았습니다. 입체 이미지는 극점 제약 조건 하에서 높은 대칭성을 가지므로, 본 논문에서는 입체 이미지 쌍의 대칭 힌트를 활용하여 입체 이미지 SR의 성능을 개선합니다. 구체적으로, 우리는 대칭 양방향 시차 주의 모듈(biPAM)과 인라인 가림 처리 방안을 제안하여 효과적으로 화면 간 정보를 상호작용시킵니다. 그 다음으로, 우리는 biPAM을 장착한 시아메즈 네트워크를 설계하여 높은 대칭성을 유지하면서 두 화면 모두를 초해상화합니다. 마지막으로, 우리는 여러 가지 조명 강건 손실 함수를 설계하여 입체 일관성을 향상시킵니다. 네 개의 공개 데이터셋에 대한 실험 결과가 우리 방법의 우수한 성능을 보여줍니다. 소스 코드는 https://github.com/YingqianWang/iPASSR에서 이용 가능합니다.