비국소적 공간-시간 상관관계를 활용한 점진적 융합 비디오 슈퍼해상도 네트워크

이전의 대부분의 융합 전략은 시계열 정보를 충분히 활용하지 못하거나 과도한 계산 시간을 소요하는 문제가 있었으며, 연속 프레임에서 시계열 정보를 효과적으로 융합하는 방법은 영상 초해상도(Video Super-Resolution, SR)에서 중요한 과제이다. 본 연구에서는 공간-시계열 정보를 보다 효과적으로 활용할 수 있도록 설계된 새로운 점진적 융합 네트워크를 제안한다. 제안한 방법은 기존의 직접 융합, 느린 융합 또는 3D 컨볼루션 전략에 비해 더 효율적이고 효과적임이 입증되었다. 이러한 점진적 융합 프레임워크 하에서, 기존 영상 SR 기법에서 복잡한 운동 추정 및 운동 보정(Motion Estimation & Motion Compensation, ME&MC) 절차를 피하기 위해 개선된 비국소 연산을 도입하였다. 공개 데이터셋을 이용한 광범위한 실험 결과, 제안한 방법은 기존 최고 성능 기법보다 평균적으로 0.96 dB의 성능 향상을 달성하였으며, 계산 속도는 약 3배 빠르고, 파라미터 수는 약 절반만을 요구함을 확인하였다.