HyperAIHyperAI

Command Palette

Search for a command to run...

Drei Ansätze zur Verbesserung der semantischen Segmentierung mittels selbstsupervisierter Tiefenschätzung

Lukas Hoyer Dengxin Dai Yuhua Chen Adrian Köring Suman Saha Luc Van Gool

Zusammenfassung

Die Schulung tiefer Netzwerke für die semantische Segmentierung erfordert große Mengen an gelabelten Trainingsdaten, was in der Praxis eine erhebliche Herausforderung darstellt, da die Erstellung von Segmentierungs-Masken ein sehr arbeitsintensiver Prozess ist. Um dieses Problem anzugehen, präsentieren wir einen Rahmen für semi-supervised semantische Segmentierung, der durch selbstüberwachte monokulare Tiefenschätzung aus unlabeled Bildsequenzen verbessert wird. Insbesondere leisten wir drei zentrale Beiträge: (1) Wir transferieren Wissen aus Merkmalen, die während der selbstüberwachten Tiefenschätzung gelernt wurden, in die semantische Segmentierung; (2) wir implementieren eine starke Datenaugmentation durch das Mischen von Bildern und Labels unter Nutzung der geometrischen Struktur der Szene; (3) wir nutzen die Vielfalt der Tiefenmerkmale sowie die Schwierigkeitsgrad der Tiefenschätzung im Rahmen eines Student-Teacher-Modells, um die aussagekräftigsten Proben auszuwählen, die für die semantische Segmentierung annotiert werden sollen. Wir validieren das vorgeschlagene Modell am Cityscapes-Datensatz, wobei alle drei Module signifikante Leistungssteigerungen zeigen, und erreichen Ergebnisse auf State-of-the-Art-Niveau für semi-supervised semantische Segmentierung. Die Implementierung ist unter https://github.com/lhoyer/improving_segmentation_with_selfsupervised_depth verfügbar.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp