HyperAIHyperAI

Command Palette

Search for a command to run...

ForkNet: Mehrfachverzweigte Volumetrische Semantische Ergänzung aus einem einzelnen Tiefenbild

Yida Wang; David Joseph Tan; Nassir Navab; Federico Tombari

Zusammenfassung

Wir schlagen ein neues Modell für die 3D semantische Vervollständigung aus einem einzelnen Tiefenbild vor, das auf einem einzelnen Encoder und drei getrennten Generatoren basiert, die verschiedene geometrische und semantische Darstellungen der ursprünglichen und vervollständigten Szene rekonstruieren, wobei alle denselben latente Raum teilen. Um Informationen zwischen den geometrischen und semantischen Zweigen des Netzes zu übertragen, führen wir Pfade zwischen ihnen ein, die Merkmale in entsprechenden Netzschichten verketten. Angeregt durch die begrenzte Anzahl von Trainingsbeispielen aus realen Szenen ist eine interessante Eigenschaft unserer Architektur die Fähigkeit, den vorhandenen Datensatz durch die Erzeugung eines neuen Trainingsdatensatzes mit hochwertigen, realistischen Szenen zu ergänzen, die sogar Verdeckungen und echtes Rauschen einschließen. Wir erstellen den neuen Datensatz, indem wir die Merkmale direkt aus dem latenten Raum entnehmen, was ein Paar aus teilweise volumetrischer Oberfläche und vollständiger volumetrischer semantischer Oberfläche erzeugt. Des Weiteren nutzen wir mehrere Diskriminatoren, um die Genauigkeit und Realismus der Rekonstruktionen zu erhöhen. Wir demonstrieren die Vorteile unseres Ansatzes an Standard-Benchmarks für die beiden am häufigsten vorkommenden VervollständigungsAufgaben: semantische 3D-Szene-Vervollständigung und 3D-Objekt-Vervollständigung.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp