HyperAIHyperAI

Command Palette

Search for a command to run...

MaskFlownet:基于可学习遮挡掩码的非对称特征匹配

Shengyu Zhao Yilun Sheng Yue Dong Eric I-Chao Chang Yan Xu

摘要

光流估计中的特征扭曲(feature warping)是一项核心技术,然而在扭曲过程中由遮挡区域引起的歧义问题仍是尚未解决的关键难题。本文提出了一种非对称遮挡感知的特征匹配模块,该模块能够在特征扭曲后无需任何显式监督,即刻学习到一个粗略的遮挡掩码,用于过滤掉无用(被遮挡)的区域。所提出的模块可轻松集成至端到端网络架构中,在引入可忽略的计算开销的同时,显著提升模型性能。所学习得到的遮挡掩码还可进一步输入至后续具有双特征金字塔结构的网络级联中,从而实现当前最优的性能表现。在投稿时,我们提出的方法——MaskFlownet,在MPI Sintel、KITTI 2012 和 KITTI 2015 基准测试中均超越了所有已发表的光流估计方法。代码已开源,地址为:https://github.com/microsoft/MaskFlownet


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供