HyperAIHyperAI

Command Palette

Search for a command to run...

利用主成分掩模提议提升无监督语义分割

Oliver Hahn Nikita Araslanov Simone Schaub-Meyer Stefan Roth

摘要

无监督语义分割旨在通过识别图像语料库中的全局语义类别,自动将图像划分为具有语义意义的区域,而无需任何形式的注释。基于近期在自监督表示学习方面的进展,我们重点关注如何利用这些大型预训练模型来完成下游的无监督分割任务。我们提出了PriMaPs(Principal Mask Proposals)——根据图像的特征表示将其分解为具有语义意义的掩码。这使得我们可以通过使用随机期望最大化算法(PriMaPs-EM)将类原型拟合到PriMaPs,从而实现无监督语义分割。尽管其概念简单,但PriMaPs-EM在各种预训练骨干模型(包括DINO和DINOv2)以及不同数据集(如Cityscapes、COCO-Stuff和Potsdam-3)上均取得了有竞争力的结果。重要的是,当PriMaPs-EM正交应用于当前最先进的无监督语义分割流水线时,能够显著提升结果。代码可在https://github.com/visinf/primaps 获取。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供