초록
고프레임 레이트(HFR) 입력에서 정규 속도, 저프레임 레이트(LFR) 영상을 생성하면서 원본의 중요한 순간을 보존하는 새로운 접근 방식을 제시한다. 이를 '타임 매핑(time-mapping)'이라 부르며, 공간적 톤 매핑(tone-mapping) 중 고다이내믹 레인지(HDR)에서 저다이내믹 레인지(LDR)로의 변환에 대한 시간 기반의 유사 개념이다. 본 연구는 다음과 같은 기여를 한다: (1) 시각적 중요도를 평가하기 위한 강건한 공간-시간 샐런시(Saliency) 방법, (2) 프레임의 중요도에 기반하여 시간적으로 재샘플링하는 리타이밍(Re-timing) 기법, (3) 중요한 운동의 렌더링 품질을 향상시키기 위한 시간 필터. 기준 데이터셋에 대한 공간-시간 샐런시 방법의 실험 결과는 현재 최고 수준의 성능을 보였다. 또한, 사용자 실험을 통해 본 방법이 더 직접적인 방법에 비해 HFR에서 LFR로의 타임 매핑에 있어 우수한 성능을 발휘함을 입증하였다.