HyperAIHyperAI

Command Palette

Search for a command to run...

変分確率融合ネットワークを用いたRGB-Tセマンティックセグメンテーション

Baihong Lin Zengrong Lin Yulan Guo Yulan Zhang Jianxiao Zou Shicai Fan

概要

RGB-Tセマンティックセグメンテーションは、RGB画像と熱画像の異なるモダリティ特性を融合することにより、照明条件が悪い難しいシーンを処理するために広く採用されています。既存の手法では、最適な融合特徴量を見つけることを試みていますが、これによりモダリティノイズ、クラス不均衡、およびモダリティバイアスに対する感度が高まっています。これらの問題を克服するため、本論文では新しい変分確率融合ネットワーク(Variational Probabilistic Fusion Network: VPFNet)を提案します。VPFNetは融合特徴量を確率変数として扱い、複数のサンプルから得られるセグメンテーション結果の平均を取ることで堅牢なセグメンテーションを達成します。VPFNetにおける融合特徴量のランダムサンプリングは、変分注意に基づいて設計された新しい変分特徴量融合モジュール(Variational Feature Fusion Module: VFFM)によって実現されます。さらにクラス不均衡やモダリティバイアスを避けるために、重み付きクロスエントロピー損失を使用し、VFFMに照度とカテゴリの事前情報を導入しています。MFNetおよびPST900データセットでの実験結果は、提案したVPFNetが最先端のセグメンテーション性能を達成できることを示しています。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています
変分確率融合ネットワークを用いたRGB-Tセマンティックセグメンテーション | 記事 | HyperAI超神経