HyperAIHyperAI

Command Palette

Search for a command to run...

TransFuser: Imitation mit transformer-basierter Sensorfusion für autonomes Fahren

Kashyap Chitta Aditya Prakash Bernhard Jaeger Zehao Yu Katrin Renz Andreas Geiger

Zusammenfassung

Wie sollten wir Darstellungen von ergänzenden Sensoren für autonomes Fahren integrieren? Geometrie-basierte Fusion hat bei der Wahrnehmung (z.B. Objekterkennung, Bewegungsvorhersage) vielversprechende Ergebnisse gezeigt. Im Kontext des end-to-end-Fahrens stellen wir jedoch fest, dass Imitationslernen auf Basis bestehender Sensorfusionmethoden in komplexen Fahrzeugbewegungsszenarien mit hoher Dichte dynamischer Agenten unterdurchschnittlich abschneidet. Deshalb schlagen wir TransFuser vor, ein Mechanismus zur Integration von Bild- und LiDAR-Darstellungen mithilfe von Selbst-Aufmerksamkeit. Unser Ansatz verwendet Transformer-Module in mehreren Auflösungen, um perspektivische Ansichten und Vogelperspektive-Featuremaps zu fusionieren. Wir validieren seine Effektivität experimentell an einem anspruchsvollen neuen Benchmark mit langen Strecken und dichtem Verkehr sowie am offiziellen Ranglistenplatz des CARLA-Stadtverkehrsimulators. Zum Zeitpunkt der Einreichung übertrifft TransFuser alle bisherigen Arbeiten im CARLA-Ranglistenplatz hinsichtlich der Fahrleistung erheblich. Verglichen mit geometrie-basierter Fusion reduziert TransFuser die durchschnittliche Anzahl von Kollisionen pro Kilometer um 48 %.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp