HyperAIHyperAI

Command Palette

Search for a command to run...

IGFormer: Interaktionsgraph-Transformer für die Skelettbasierte Erkennung menschlicher Interaktionen

Yunsheng Pang Qiuhong Ke Hossein Rahmani James Bailey Jun Liu

Zusammenfassung

Die Erkennung menschlicher Interaktionen ist in vielen Anwendungen von großer Bedeutung. Ein entscheidender Hinweis bei der Erkennung einer Interaktion sind die interaktiven Körperteile. In dieser Arbeit schlagen wir ein neues Netzwerk vor, das auf einem Interaction Graph Transformer (IGFormer) basiert und die interaktiven Körperteile als Graphen modelliert, um auf Skelettbasis Interaktionen zu erkennen. Genauer gesagt konstruiert der vorgeschlagene IGFormer Interaktionsgraphen gemäß den semantischen und räumlichen Korrelationen zwischen den interaktiven Körperteilen und verbessert die Darstellung jeder Person durch die Aggregation der Informationen der interaktiven Körperteile auf Basis der gelernten Graphen. Des Weiteren schlagen wir ein Semantisches Partitionierungsmodul (Semantic Partition Module) vor, das jede Folge eines menschlichen Skeletts in eine Körper-Teil-Zeit-Folge transformiert, um die räumliche und zeitliche Information der Skelettfolge besser zu erfassen, um die Graphen zu lernen. Ausführliche Experimente auf drei Benchmark-Datensätzen zeigen, dass unser Modell den aktuellen Stand der Technik erheblich übertrifft.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp