HyperAIHyperAI

Command Palette

Search for a command to run...

Lernen von Gruppenaktivitäten aus Skeletten ohne individuelle Aktionslabels

Fabio Zappardino Tiberio Uricchio Lorenzo Seidenari Alberto Del Bimbo

Zusammenfassung

Um menschliches Verhalten zu verstehen, müssen wir nicht nur einzelne Handlungen erkennen, sondern auch möglicherweise komplexe Gruppenaktivitäten und deren Interaktionen modellieren. Hierarchische Modelle erzielen derzeit die besten Ergebnisse bei der Erkennung von Gruppenaktivitäten, erfordern jedoch fein granulierte Annotationen individueller Aktionen auf der Ebene der Akteure. In diesem Paper zeigen wir, dass es möglich ist, ein state-of-the-art end-to-end-System ausschließlich mit skelettbasierter Daten zu trainieren, wobei lediglich Aktivitätslabels auf Sequenzebene zur Verfügung stehen. Unsere Experimente belegen, dass Modelle, die ohne individuelle Aktionssupervision trainiert werden, erheblich schlechtere Leistungen erzielen. Andererseits zeigen wir, dass sogenannte Pseudolabels aus beliebigen vortrainierten Merkmalsextraktoren berechnet werden können, wodurch vergleichbare Endleistungen erzielt werden. Schließlich demonstrieren wir, dass unsere sorgfältig entworfene, auf Pose-basierten Daten basierende Architektur – selbst im selbstüberwachten Modus – äußerst wettbewerbsfähige Ergebnisse erzielt, verglichen mit komplexeren multimodalen Ansätzen.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Lernen von Gruppenaktivitäten aus Skeletten ohne individuelle Aktionslabels | Paper | HyperAI