HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

Glassegmentierung mithilfe von Intensitäts- und spektralpolarisationstypischen Merkmalen

{Xin Yang Xiaopeng Wei Pieter Peers Felix Heide Seung-Hwan Baek Jiaxi Yang Wen Dong Bo Dong Haiyang Mei}

Glassegmentierung mithilfe von Intensitäts- und spektralpolarisationstypischen Merkmalen

Abstract

Transparente und halbtransparente Materialien stellen aufgrund ihres Fehlens an RGB-Textur erhebliche Herausforderungen für bestehende Algorithmen zur Szenenverstehens und Segmentierung dar, da dies die Extraktion sinnvoller Merkmale erschwert. In dieser Arbeit nutzen wir die Tatsache, dass die Licht-Materie-Wechselwirkungen an Glasmaterialien für jedes beobachtete Lichtwellenlängenband einzigartige Intensitäts-Polarisationsmerkmale liefern. Wir präsentieren ein neuartiges, lernbasiertes Segmentierungsnetzwerk für Glas, das sowohl trichromatische (RGB) Intensitäten als auch trichromatische lineare Polarisationseigenschaften aus einer einzigen Aufnahme nutzt, ohne Annahmen über den Polarisationzustand der Beleuchtung zu treffen. Unsere neuartige Netzarchitektur fusions- und gewichtete dynamisch sowohl die trichromatischen Farb- als auch Polarisationseigenschaften mithilfe eines innovativen globalen Führungssystems und eines mehrskaligen Selbst-Attention-Moduls und nutzt globale, über-domänen-übergreifende Kontextinformationen, um eine robuste Segmentierung zu erreichen. Wir trainieren und validieren unsere Segmentierungsmethode umfassend auf einem neuen, großskaligen RGB-Polarisations-Datensatz (RGBP-Glass) und zeigen, dass unsere Methode state-of-the-art-Segmentieransätze signifikant übertrifft.

Benchmarks

BenchmarkMethodikMetriken
camouflaged-object-segmentation-on-pcod-1200PGSNet
S-Measure: 0.916
semantic-segmentation-on-kitti-360PGSNet (RGB-D-LiDAR)
mIoU: 48.51

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp