HyperAIHyperAI

Command Palette

Search for a command to run...

MCBLT: Mehrkameras-Mehrgegenstand-3D-Verfolgung in langen Videos

Yizhou Wang Tim Meinhardt Orcun Cetintas Cheng-Yen Yang Sameer S. Pusegaonkar Benjamin Missaoui Sujit Biswas Zheng Tang Laura Leal-Taixé

Zusammenfassung

Die Objekterkennung durch Mehrfachansichtskameras ist für intelligente Systeme von entscheidender Bedeutung, insbesondere in Indoor-Umgebungen wie Lagerräumen, Einzelhandelsläden und Krankenhäusern. Die meisten traditionellen Methoden zur Mehrziel-Erkennung und -Verfolgung mit Mehrfachansichtskameras (MTMC) basieren auf 2D-Objekterkennung, Einzelfeld-Mehrfachobjektverfolgung (MOT) und Cross-View-Re-Identification (ReID)-Techniken, ohne wichtige 3D-Informationen durch die Aggregation von Mehrfachansichten angemessen zu berücksichtigen. In dieser Arbeit schlagen wir einen Framework für 3D-Objekterkennung und -Verfolgung vor, der MCBLT genannt wird. Dieser aggregiert zunächst Mehrfachansichtsbilder unter Verwendung notwendiger Kamerakalibrierungsparameter, um 3D-Objekterkennungen in einer Vogelperspektive (BEV) zu erhalten. Anschließend führen wir hierarchische Graph Neural Networks (GNNs) ein, um diese 3D-Erkennungen in der Vogelperspektive (BEV) für MTMC-Verfolgungsergebnisse zu verfolgen. Im Gegensatz zu bestehenden Methoden zeichnet sich MCBLT durch eine beeindruckende Generalisierungsfähigkeit in verschiedenen Szenarien und bei unterschiedlichen Kamereinstellungen aus, verbunden mit einer außergewöhnlichen Fähigkeit zur langfristigen Zuordnung. Als Ergebnis etabliert unser vorgeschlagener MCBLT einen neuen Stand der Technik im AICity'24-Datensatz mit einem HOTA-Wert von 81,2281{,}2281,22 und im WildTrack-Datensatz mit einem IDF1-Wert von 95,695{,}695,6.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp