HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

SCF-Net: Lernen räumlicher Kontextmerkmale für die Segmentierung großer Punktwolken

{Fei-Yue Wang Peijun Ye Yisheng Lv Fenghua Zhu Qiulei Dong Siqi Fan}

SCF-Net: Lernen räumlicher Kontextmerkmale für die Segmentierung großer Punktwolken

Abstract

Die Gewinnung effektiver Merkmale aus großskaligen Punktwolken für die semantische Segmentierung hat in den letzten Jahren zunehmend Aufmerksamkeit erhalten. Um dieses Problem anzugehen, stellen wir ein lernbares Modul vor, das räumliche Kontextmerkmale aus großskaligen Punktwolken lernt und in dieser Arbeit als SCF (Spatial Contextual Features) bezeichnet wird. Das vorgeschlagene Modul besteht hauptsächlich aus drei Blöcken: dem lokalen Polardarstellungsblock, dem Dual-Distanz-Attention-Pooling-Block und dem globalen Kontextmerkmalsblock. Für jeden 3D-Punkt wird zunächst der lokale Polardarstellungsblock genutzt, um eine räumliche Darstellung zu konstruieren, die invariant gegenüber Drehungen um die z-Achse ist. Anschließend wird der Dual-Distanz-Attention-Pooling-Block entworfen, um die Darstellungen benachbarter Punkte zu nutzen, um durch Berücksichtigung sowohl der geometrischen als auch der Merkmalsdistanzen zwischen ihnen differenziertere lokale Merkmale zu lernen. Schließlich wird der globale Kontextmerkmalsblock entwickelt, um für jeden 3D-Punkt einen globalen Kontext zu lernen, indem dessen räumliche Lage sowie das Volumenverhältnis der Nachbarschaft zur gesamten Punktwolke herangezogen werden. Das vorgeschlagene Modul lässt sich problemlos in verschiedene Netzarchitekturen zur Punktwolken-Segmentierung integrieren und führt natürlich zu einem neuen 3D-semantischen Segmentierungsnetzwerk mit einer Encoder-Decoder-Architektur, das in dieser Arbeit als SCF-Net bezeichnet wird. Umfangreiche Experimente auf zwei öffentlichen Datensätzen zeigen, dass das vorgeschlagene SCF-Net in den meisten Fällen die Leistung mehrerer state-of-the-art-Methoden übertrifft.

Benchmarks

BenchmarkMethodikMetriken
3d-semantic-segmentation-on-sensaturbanSCF-Net
mIoU: 55.1
3d-semantic-segmentation-on-stpls3dSCF-Net
mIOU: 50.65
3d-semantic-segmentation-on-toronto-3dSCF-Net
OA: 95.50
mIoU: 73.60
semantic-segmentation-on-s3disSCF-Net
Mean IoU: 71.6
Number of params: N/A
mAcc: 82.7
oAcc: 88.4
semantic-segmentation-on-s3dis-area5SCF-Net
Number of params: N/A
mAcc: 71.8
mIoU: 63.7
oAcc: 87.2
semantic-segmentation-on-semantic3dSCF-Net
mIoU: 77.6%
oAcc: 94.7%

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp