HyperAIHyperAI

Command Palette

Search for a command to run...

vor 4 Monaten

LMOT: Effiziente lightweight Detektion und Verfolgung in Menschenmengen

{AbdElMoniem Bayoumi Hoda Baraka Rana Mostafa}

Abstract

Multi-Object-Tracking ist eine zentrale Komponente in verschiedenen Anwendungen der Robotik und Computer Vision. Bisherige Ansätze zum Multi-Object-Tracking setzen jedoch eine Abwägung zwischen Rechenzeit und Tracking-Genauigkeit, was die Implementierung solcher Pipelines in Echtzeitanwendungen erschwert. In dieser Arbeit wird ein neuartiges Echtzeitmodell vorgestellt, das LMOT (Light-weight Multi-Object Tracker), welches die gemeinsame Durchführung von Fußgängerdetektion und -verfolgung ermöglicht. LMOT verwendet einen vereinfachten DLA-34-Encoder-Netzwerk, um detektionsrelevante Merkmale für das aktuelle Bild effizient zu extrahieren. Darüber hinaus generieren wir effiziente Verfolgungsmerkmale mithilfe eines linearen Transformers für den vorherigen Bildframe und dessen zugehörige Detektions-Heatmap. Anschließend fusioniert LMOT sowohl die Detektions- als auch die Verfolgungsmerkmalskarten in einer mehrschichtigen Architektur und führt eine zweistufige Online-Datenassoziation durch, die auf dem Kalman-Filter basiert, um Tracklets zu erzeugen. Wir haben unser Modell anhand der anspruchsvollen realen Datensätze MOT16/17/20 evaluiert und zeigen, dass LMOT die derzeit besten Tracker hinsichtlich Laufzeit deutlich übertrifft, während gleichzeitig eine hohe Robustheit erhalten bleibt. LMOT ist im Durchschnitt etwa zehnmal schneller als die aktuellen State-of-the-Art-Tracker, wobei die Leistungsgenauigkeit lediglich um durchschnittlich 3,8 % zurückgeht – was ein deutlich rechenleichteres Modell ergibt.

Benchmarks

BenchmarkMethodikMetriken
multi-object-tracking-on-mot16LMOT
IDF1: 72.3
IDs: 669
MOTA: 73.2
multi-object-tracking-on-mot17LMOT
IDF1: 70.3
MOTA: 72.0
multi-object-tracking-on-mot20-1LMOT
IDF1: 61.1
MOTA: 59.1

KI mit KI entwickeln

Von der Idee bis zum Start — beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und den besten GPU-Preisen.

KI-Co-Coding
Sofort einsatzbereit GPUs
Beste Preise
Jetzt starten

Hyper Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
LMOT: Effiziente lightweight Detektion und Verfolgung in Menschenmengen | Forschungsarbeiten | HyperAI