Asymmetrische bidirektionale Bewegungsschätzung für die Videobildinterpolation

Wir stellen einen neuartigen Algorithmus zur Video-Frame-Interpolation basierend auf asymmetrischer bilateralen Bewegungsschätzung (ABME) vor, der einen Zwischenframe zwischen zwei Eingabebildern synthetisiert. Zunächst schätzen wir symmetrische bilaterale Bewegungsfelder vor, um einen Ankerframe zu interpolieren. Anschließend schätzen wir asymmetrische bilaterale Bewegungsfelder vom Ankerframe zu den Eingabebildern. Anschließend verwenden wir diese asymmetrischen Felder, um die Eingabebilder rückwärts zu warpen und den Zwischenframe zu rekonstruieren. Schließlich entwickeln wir ein neues Synthesenetzwerk, um den Zwischenframe zu verfeinern, das eine Reihe dynamischer Filter sowie einen Residuenframe unter Verwendung lokaler und globaler Informationen generiert. Experimentelle Ergebnisse zeigen, dass der vorgeschlagene Algorithmus hervorragende Leistung auf verschiedenen Datensätzen erzielt. Der Quellcode und vortrainierte Modelle sind unter https://github.com/JunHeum/ABME verfügbar.