HyperAIHyperAI

Command Palette

Search for a command to run...

基于深度感知的视频帧插值

Wenbo Bao Wei-Sheng Lai Chao Ma Xiaoyun Zhang Zhiyong Gao Ming-Hsuan Yang

摘要

视频帧插值旨在在原始帧之间合成不存在的帧。尽管最近的深度卷积神经网络取得了显著进展,但由于大物体运动或遮挡,插值质量常常会下降。在这项工作中,我们提出了一种视频帧插值方法,通过探索深度信息显式检测遮挡。具体而言,我们开发了一个深度感知流投影层(depth-aware flow projection layer),用于合成中间光流,优先采样较近的物体而非较远的物体。此外,我们学习了层次特征以从邻近像素中收集上下文信息。所提出的模型根据光流和局部插值核对输入帧、深度图和上下文特征进行变形,以合成输出帧。我们的模型紧凑、高效且完全可微分。定量和定性结果表明,所提出的模型在多种数据集上优于现有的最先进的帧插值方法。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供