HyperAIHyperAI

Command Palette

Search for a command to run...

ASFormer : Transformer pour la segmentation d'actions

Fangqiu Yi Hongyu Wen Tingting Jiang

Résumé

Les algorithmes destinés à la tâche de segmentation d’actions utilisent généralement des modèles temporels pour prédire quelle action se produit à chaque trame au cours d’une activité quotidienne d’une durée d’une minute. Des études récentes ont mis en évidence le potentiel des Transformers dans la modélisation des relations entre les éléments dans les données séquentielles. Toutefois, plusieurs préoccupations majeures surviennent lors de l’application directe du Transformer à la tâche de segmentation d’actions : le manque de biais inductifs avec de petits ensembles d’entraînement, la difficulté à traiter des séquences d’entrée longues, ainsi que les limitations de l’architecture du décodeur dans l’exploitation des relations temporelles entre plusieurs segments d’actions afin de raffiner les prédictions initiales. Pour répondre à ces défis, nous proposons un modèle efficace basé sur le Transformer pour la segmentation d’actions, nommé ASFormer, caractérisé par trois particularités distinctes : (i) nous intégrons explicitement des prioris inductifs de connectivité locale, en raison de la forte localité des caractéristiques ; cela restreint l’espace d’hypothèses à une portée fiable, ce qui est bénéfique pour apprendre une fonction cible appropriée même avec de petits ensembles d’entraînement ; (ii) nous adoptons un schéma de représentation hiérarchique prédéfini, permettant un traitement efficace des séquences d’entrée longues ; (iii) nous concevons soigneusement le décodeur afin de raffiner les prédictions initiales issues de l’encodeur. Des expériences étendues sur trois jeux de données publics démontrent l’efficacité de notre approche. Le code est disponible à l’adresse \url{https://github.com/ChinaYi/ASFormer}.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
ASFormer : Transformer pour la segmentation d'actions | Articles | HyperAI