2달 전

세부 정보를 드러내는 딥 비디오 슈퍼 리졸루션

Xin Tao; Hongyun Gao; Renjie Liao; Jue Wang; Jiaya Jia
세부 정보를 드러내는 딥 비디오 슈퍼 리졸루션
초록

이전의 CNN 기반 비디오 초해상도 접근 방식은 여러 프레임을 참조 프레임에 맞추는 것이 필요했습니다. 본 논문에서는 적절한 프레임 정렬과 모션 보정이 고품질 결과를 달성하는 데 있어 필수적이라는 점을 보여줍니다. 이를 바탕으로 CNN 구조에서 '서브픽셀 모션 보정' (Sub-Pixel Motion Compensation, SPMC) 레이어를 제안합니다. 분석 및 실험을 통해 이 레이어가 비디오 초해상도(SR)에 적합함을 입증하였습니다. 최종적으로 제안된 엔드투엔드(end-to-end), 확장 가능한(scalable) CNN 구조는 SPMC 레이어를 효과적으로 통합하고, 여러 프레임을 융합하여 이미지 세부 정보를 드러냅니다. 우리의 구현은 파라미터 조정 없이 시각적 및 정량적으로 고품질의 결과를 생성하며, 현재 최신 기술(state-of-the-arts)보다 우수한 성능을 보입니다.

세부 정보를 드러내는 딥 비디오 슈퍼 리졸루션 | 최신 연구 논문 | HyperAI초신경