초록
우리는 두 입력 프레임 사이에 중간 프레임을 합성하는 데 기반한 비대칭 양방향 운동 추정(ABME, Asymmetric Bilateral Motion Estimation) 기반의 새로운 영상 프레임 보간 알고리즘을 제안한다. 먼저, 대칭 양방향 운동 필드를 예측하여 앵커 프레임을 보간한다. 다음으로, 앵커 프레임에서 입력 프레임으로의 비대칭 양방향 운동 필드를 추정한다. 그 후, 추정된 비대칭 필드를 이용해 입력 프레임을 역방향 왜곡(warp)하고, 중간 프레임을 재구성한다. 마지막으로, 중간 프레임의 품질을 개선하기 위해 지역적 및 전역적 정보를 활용하여 동적 필터 세트와 잔차 프레임을 생성하는 새로운 합성 네트워크를 개발한다. 실험 결과, 제안된 알고리즘이 다양한 데이터셋에서 우수한 성능을 달성함을 확인하였다. 소스 코드와 사전 학습된 모델은 https://github.com/JunHeum/ABME 에서 제공된다.