HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

GEBNet: Graph-Enhancement Branch Network für die RGB-T-Szenenanalyse

{Lu Yu Xiaohong Qian WuJie Zhou Shaohua Dong}

Abstract

Die Szenenanalyse in RGB-T (rot-grün-blau und thermisch) hat in letzter Zeit erhebliche Forschungsinteressen geweckt. Obwohl bestehende Methoden die RGB-T-Szenenanalyse effizient durchführen, bleibt ihre Leistung durch einen geringen Empfangsfeldbereich eingeschränkt. Im Gegensatz zu Verfahren, die den globalen Kontext durch die Fusion multiskaliger Merkmale oder durch den Einsatz von Aufmerksamkeitsmechanismen erfassen, schlagen wir ein Graph-Enhancement-Branch-Netzwerk (GEBNet) vor, das langreichweitige Abhängigkeiten aus dem Branch zur Feinabstimmung einer groben semantischen Karte, die vom Decoder generiert wurde, nutzt. In der Graph-Enhancement-Branch sind semantische und Detailmodule integriert, die hoch- und niederwertige Merkmale fusionieren. Darüber hinaus lassen sich durch die Fähigkeit von Graph-Neural-Networks, den globalen Kontext zu erfassen, ein neuartiger Graph-Enhancement-Modul in den Netzwerkzweig integrieren, um globale Informationen sowohl aus hochwertigen semantischen Informationen als auch aus niedrigwertigen Details zu gewinnen. Ergebnisse aus umfangreichen Experimenten auf den Datensätzen MFNet und PST900 belegen die hohe Leistungsfähigkeit des vorgeschlagenen GEBNet sowie die Beiträge seiner zentralen Komponenten zur Szenenanalyseleistung.

Benchmarks

BenchmarkMethodikMetriken
thermal-image-segmentation-on-mfn-datasetGEBNet
mIOU: 56.2
thermal-image-segmentation-on-pst900GEBNet
mIoU: 81.15

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp