
摘要
尽管卷积神经网络在各类计算机视觉任务中取得了显著成功,但由于室内场景结构复杂,其识别仍然面临重大挑战。因此,如何有效利用场景中的语义信息,成为推动室内场景识别技术发展的关键问题。然而,现有方法在利用语义信息方面受到语义分割精度的限制,导致大多数方法仍停留在辅助标注或共现统计等较浅层次,鲜有研究能够直接建模场景中语义元素之间的上下文关系。为此,本文提出一种语义区域关系模型(Semantic Region Relationship Model, SRRM),该模型直接从场景内部的语义信息出发,采用一种自适应且高效的方法,以缓解语义歧义带来的负面影响,并进一步建模语义区域间的关联关系,实现场景识别。此外,为更全面地挖掘场景中蕴含的信息,我们将提出的SRRM与PlacesCNN模块相结合,构建了联合语义区域关系模型(Combined Semantic Region Relation Model, CSRRM),并提出一种新颖的信息融合策略,以有效挖掘二者之间的互补信息。实验结果表明,CSRRM在MIT Indoor 67、简化版Places365以及SUN RGB-D数据集上均显著优于现有最先进方法,且无需重新训练即可取得优异性能。代码已开源,地址为:https://github.com/ChuanxinSong/SRRM