4 个月前

ExFuse: 提升特征融合以增强语义分割

Zhenli Zhang; Xiangyu Zhang; Chao Peng; Dazhi Cheng; Jian Sun
ExFuse: 提升特征融合以增强语义分割
摘要

现代语义分割框架通常结合预训练骨干卷积模型中的低级和高级特征以提升性能。在本文中,我们首先指出,简单地融合低级和高级特征可能因语义层次和空间分辨率之间的差距而效果不佳。我们发现,将语义信息引入低级特征,并将高分辨率细节引入高级特征,对于后续的特征融合更为有效。基于这一观察,我们提出了一种新的框架——ExFuse,旨在弥合低级和高级特征之间的差距,从而显著提高分割质量,总体提升了4.0%。此外,我们在具有挑战性的PASCAL VOC 2012分割基准上评估了我们的方法,达到了87.9%的平均交并比(mean IoU),超过了之前最先进的结果。