用于视频帧插值的非对称双边运动估计

我们提出了一种基于非对称双边运动估计（Asymmetric Bilateral Motion Estimation, ABME）的新型视频帧插值算法，用于在两帧输入图像之间合成中间帧。首先，我们预测对称的双边运动场，以插值生成一个参考帧（anchor frame）；其次，从该参考帧向两个输入帧估计非对称的双边运动场；第三，利用这些非对称运动场将输入帧反向 warp，进而重建中间帧；最后，为进一步优化中间帧的质量，我们设计了一种新型融合网络，该网络结合局部与全局信息，生成一组动态滤波器和残差帧，实现更精确的帧合成。实验结果表明，所提算法在多个数据集上均取得了优异的性能。相关源代码与预训练模型已开源，可访问 https://github.com/JunHeum/ABME 获取。