HyperAIHyperAI

Command Palette

Search for a command to run...

基于RGB-热图像对的玻璃分割

Dong Huo Jian Wang Yiming Qian Yee-Hong Yang

摘要

本文提出了一种利用配对的RGB和热图像进行玻璃分割的新方法。由于可见光和热能通过玻璃时的传输特性存在较大差异,大多数玻璃对可见光是透明的,但对热能则是不透明的,因此在场景中,使用一对RGB和热图像比单独使用RGB图像更能区分出玻璃区域。为了充分利用这一独特特性,我们提出了一种神经网络架构,该架构通过一个新的基于注意力机制的多模态融合模块有效结合了RGB-热图像对,并集成了卷积神经网络(CNN)和 Transformer (Transformer),分别用于提取局部特征和非局部依赖关系。此外,我们还收集了一个包含5551对带有真实分割注释的RGB-热图像的新数据集。定性和定量评估均表明,所提出的融合RGB和热数据的方法在玻璃分割方面具有有效性。我们的代码和数据可在https://github.com/Dong-Huo/RGB-T-Glass-Segmentation 获取。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供