HyperAIHyperAI

Command Palette

Search for a command to run...

MADrive: Modellierung von Fahrzeugszenen mit erweitertem Gedächtnis

Polina Karpikova Daniil Selikhanovych Kirill Struminsky Ruslan Musaev Maria Golitsyna Dmitry Baranchuk

Zusammenfassung

Neuere Fortschritte bei der Szenerie-Rekonstruktion haben dazu geführt, dass autonome Fahrzeugumgebungen (Autonomous Driving, AD) mittels 3D-Gauß-Splatting hochrealistisch modelliert werden können. Dennoch bleiben die daraus resultierenden Rekonstruktionen eng an den ursprünglichen Beobachtungen gebunden und haben Schwierigkeiten, photorealistische Synthesen von erheblich veränderten oder neuen Fahrzeugszenarien zu unterstützen. Diese Arbeit stellt MADrive vor, ein rekonstruktionsverstärkendes Framework mit erweiterter Speicherkapazität, das darauf abzielt, die Fähigkeiten bestehender Szenerie-Rekonstruktionsmethoden durch die Ersetzung beobachteter Fahrzeuge mit visuell ähnlichen 3D-Objekten aus einer groß angelegten externen Speicherbank zu erweitern. Insbesondere veröffentlichen wir MAD-Cars, eine sorgfältig zusammengestellte Datenbank von etwa 70.000 360°-Fahrzeugvideos, die im realen Straßenverkehr aufgenommen wurden, und präsentieren ein Retrieval-Modul, das die am ähnlichsten aussehenden Fahrzeuginstanzen in der Speicherbank findet, die entsprechenden 3D-Objekte aus den Videos rekonstruiert und sie durch Ausrichtung der Orientierung und Neubeleuchtung in die Ziel-Szene integriert. Die resultierenden Ersatzobjekte bieten vollständige multiview-Darstellungen der Fahrzeuge in der Szene und ermöglichen es, wie unsere Experimente zeigen, photorealistische Synthesen von erheblich veränderten Konfigurationen zu erstellen. Projektseite: https://yandex-research.github.io/madrive/


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
MADrive: Modellierung von Fahrzeugszenen mit erweitertem Gedächtnis | Paper | HyperAI