2 个月前

用于共显著目标检测的判别性共显著性和背景挖掘变换器

Li, Long ; Han, Junwei ; Zhang, Ni ; Liu, Nian ; Khan, Salman ; Cholakkal, Hisham ; Anwer, Rao Muhammad ; Khan, Fahad Shahbaz
用于共显著目标检测的判别性共显著性和背景挖掘变换器
摘要

大多数先前的共显著对象检测工作主要集中在通过挖掘图像间的共一致性关系来提取共显著线索,而忽略了对背景区域的显式探索。在本文中,我们提出了一种基于多个经济型多粒度相关模块的判别性共显著性和背景挖掘Transformer框架(DMT),以显式地挖掘共显著性和背景信息,并有效建模它们之间的区分性。具体而言,我们首先提出了一种区域到区域的相关模块,用于在保持计算效率的同时将图像间的关系引入像素级分割特征。然后,我们利用两种预定义的标记通过所提出的对比诱导像素到标记相关模块和共显著性标记到标记相关模块来挖掘共显著性和背景信息。此外,我们还设计了一种标记引导的特征精炼模块,在学习到的标记指导下增强分割特征的区分能力。我们在分割特征提取和标记构建之间进行了迭代互促。三个基准数据集上的实验结果证明了我们所提出方法的有效性。源代码可在以下地址获取:https://github.com/dragonlee258079/DMT。

用于共显著目标检测的判别性共显著性和背景挖掘变换器 | 最新论文 | HyperAI超神经