HyperAIHyperAI

Command Palette

Search for a command to run...

FEELVOS:用于视频目标分割的快速端到端嵌入学习

Paul Voigtlaender Yuning Chai Florian Schroff Hartwig Adam Bastian Leibe Liang-Chieh Chen

摘要

近年来,许多成功的视频对象分割(VOS)方法过于复杂,严重依赖于对第一帧的微调,且速度较慢,因此在实际应用中受到一定限制。在本研究中,我们提出了一种简单快速的方法——FEELVOS,该方法不依赖于微调。为了对视频进行分割,FEELVOS 在每一帧中使用了语义像素级嵌入以及全局和局部匹配机制,从视频的第一帧和前一帧向当前帧传递信息。与以往的工作不同,我们的嵌入仅作为卷积网络内部的引导。我们提出的新型动态分割头允许我们使用交叉熵损失端到端地训练网络,包括嵌入部分,以完成多对象分割任务。我们在不进行微调的情况下,在DAVIS 2017验证集上取得了71.5%的J&F指标的新纪录。我们的代码和模型已公开发布在 https://github.com/tensorflow/models/tree/master/research/feelvos


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
FEELVOS:用于视频目标分割的快速端到端嵌入学习 | 论文 | HyperAI超神经