HyperAIHyperAI

Command Palette

Search for a command to run...

Innendepth-Vervollständigung mit Randkonsistenz und Selbst-Aufmerksamkeit

Yu-Kai Huang Tsung-Han Wu Yueh-Cheng Liu Winston H. Hsu

Zusammenfassung

Tiefenschätzungsfunktionen sind für die 3D-Erkennung hilfreich. Kostengünstige Tiefenkameras können in Echtzeit Tiefen- und Farbbilder aufnehmen. Allerdings können glatte, transparente oder ferne Oberflächen vom Sensor nicht korrekt gescannt werden. Daher ist die Verbesserung und Restauration der erfassten Tiefeninformation eine wichtige Aufgabe. Die Tiefenvervollständigung zielt darauf ab, die Lücken zu füllen, die Sensoren nicht erfassen können, was immer noch eine komplexe Aufgabe für Maschinenlearning-Systeme darstellt. Traditionelle manuell justierte Methoden haben ihre Grenzen erreicht, während neuronale Netzwerkbasierte Ansätze dazu neigen, die Ausgabe aus den umliegenden Tiefenwerten zu kopieren und zu interpolieren. Dies führt zu verschwommenen Konturen und der Struktur des Tiefenbildes geht verloren. Unser Hauptanliegen besteht daher darin, ein End-to-End-Netzwerk zu entwickeln, das die Qualität von vervollständigten Tiefenkarten verbessert, während es gleichzeitig die Kantenklarheit beibehält. Wir nutzen das Selbst-Aufmerksamkeitsmechanismus (self-attention mechanism), der bisher in der Bildergänzung verwendet wurde, um in jeder Schicht der Faltung nützlichere Informationen zu extrahieren und so die vollständige Tiefenkarte zu verbessern. Darüber hinaus schlagen wir den Konzept der Kantenkonsistenz vor, um die Qualität und Struktur der Tiefenkarte weiter zu erhöhen. Experimentelle Ergebnisse bestätigen die Effektivität unseres Schemas zur Selbst-Aufmerksamkeit und Kantenkonsistenz, das den bisher besten Arbeiten zur Tiefenvervollständigung auf dem Matterport3D-Datensatz übertrifft. Unser Code ist öffentlich verfügbar unter https://github.com/tsunghan-wu/Depth-Completion.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Innendepth-Vervollständigung mit Randkonsistenz und Selbst-Aufmerksamkeit | Paper | HyperAI