HyperAIHyperAI

Command Palette

Search for a command to run...

Fusion von ereignisbasierter und RGB-Kamera für robuste Objekterkennung unter ungünstigen Bedingungen

Christian Laugier Alessandro Renzaglia Khushdeep Singh Mann Anshul Paigwar Abhishek Tomy

Zusammenfassung

Die Fähigkeit, Objekte unter Bildverzerrungen und unterschiedlichen Wetterbedingungen zu detektieren, ist für Deep-Learning-Modelle von entscheidender Bedeutung, insbesondere wenn sie in realen Anwendungen wie der autonomen Fahrzeugsteuerung eingesetzt werden. Herkömmliche auf RGB-Bildern basierende Detektionssysteme versagen unter solchen Bedingungen, weshalb es wichtig ist, einen Sensorensatz zu entwerfen, der redundante Sicherheit gegenüber Ausfällen der primären framebasierten Detektion bietet. Event-basierte Kameras können framebasierte Kameras in schwach beleuchteten Situationen und Szenarien mit hohem Dynamikbereich ergänzen, wie sie ein autonomes Fahrzeug während der Navigation begegnen kann. Dementsprechend schlagen wir ein redundantes Sensorfusionssystem aus eventbasierten und framebasierten Kameras vor, das robust gegenüber häufigen Bildverzerrungen ist. Die Methode verwendet eine Voxel-Grid-Darstellung von Ereignissen als Eingabe und stellt ein zweigeteiltes, paralleles Merkmalsextraktionsnetzwerk für Frames und Ereignisse vor. Unser Ansatz zur Sensorfusion zeigt eine Umsetzungsrobustheit gegenüber Verzerrungen um über 30 % im Vergleich zu rein framebasierten Detektionen und übertrifft zudem die Leistung reiner eventbasierter Detektion. Das Modell wurde auf dem öffentlich verfügbaren DSEC-Datensatz trainiert und evaluiert.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp