HyperAIHyperAI

Command Palette

Search for a command to run...

Apprentissage d'un réseau de graphes spatio-temporels à multiples granularités pour la reconnaissance d'actions basée sur les squelettes

Tailin Chen Desen Zhou Jian Wang Shidong Wang Yu Guan Xuming He Errui Ding

Résumé

La tâche de reconnaissance d’actions basée sur les squelettes reste un défi central dans le domaine de la compréhension des scènes centrées sur l’humain, en raison de la multiplicité des granularités et de la grande variabilité des mouvements humains. Les approches existantes utilisent généralement une seule représentation neuronale pour modéliser différents types de mouvements, ce qui rend difficile la capture des classes d’actions à très fine granularité, particulièrement en présence de données d’entraînement limitées. Pour surmonter ces limitations, nous proposons un nouveau réseau graphique spatio-temporel multi-granulaire pour la classification d’actions à partir de squelettes, capable de modéliser simultanément les motifs de mouvement grossiers et fins du squelette. À cette fin, nous avons conçu un réseau graphique à deux têtes composé de deux branches imbriquées, permettant une extraction efficace et efficace de caractéristiques à deux résolutions spatio-temporelles. En outre, notre architecture met en œuvre une stratégie de communication inter-têtes afin d’améliorer mutuellement les représentations des deux têtes. Nous avons mené des expériences approfondies sur trois jeux de données à grande échelle — NTU RGB+D 60, NTU RGB+D 120 et Kinetics-Skeleton — et obtenu des performances de pointe sur tous les benchmarks, ce qui confirme l’efficacité de notre méthode.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp