HyperAIHyperAI

Command Palette

Search for a command to run...

Aktionserkennung auf der Grundlage von Gelenkbahnkarten mit Faltungsneuronalen Netzen

Xin Li Zhiyong Chen Yonghong Tian

Zusammenfassung

Faltungsschichtneuronale Netze (ConvNets) haben kürzlich in vielen Aufgaben der Computer Vision, insbesondere bei bildbasierten Erkennungsaufgaben, vielversprechende Leistungen gezeigt. Die effektive Anwendung von ConvNets auf sequenzbasierte Daten stellt jedoch weiterhin eine offene Frage dar. In dieser Arbeit wird eine effektive und einfache Methode vorgeschlagen, um die räumlich-zeitliche Information, die in 3D-Skelettfolgen enthalten ist, in drei 2D-Bilder zu kodieren. Dabei werden die Gelenkbahnen und ihre Dynamik in Farbverteilungen im Bild übertragen, was als Joint Trajectory Maps (JTM) bezeichnet wird. Die ConvNets werden verwendet, um diskriminierende Merkmale für die Erkennung menschlicher Aktionen zu lernen. Diese bildbasierte Darstellung ermöglicht es uns, existierende ConvNets-Modelle für die Klassifizierung von Skelettfolgen fein abzustimmen, ohne die Netzwerke neu zu trainieren. Die drei JTMs werden in drei orthogonalen Ebenen generiert und ergänzen sich gegenseitig mit Informationen. Die endgültige Erkennung wird durch die Multiplikation der Scores der drei JTMs weiter verbessert. Die vorgeschlagene Methode wurde anhand von vier öffentlichen Benchmark-Datensätzen evaluiert: dem großen NTU RGB+D Datensatz, dem MSRC-12 Kinect Gestur-Datensatz (MSRC-12), dem G3D Datensatz und dem UTD Multimodal Human Action Datensatz (UTD-MHAD). Dabei wurden Stand-der-Technik-Ergebnisse erzielt.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Aktionserkennung auf der Grundlage von Gelenkbahnkarten mit Faltungsneuronalen Netzen | Paper | HyperAI