Anticipation d'actions avec cohérence des objectifs

Dans cet article, nous abordons le problème de l’anticipation d’actions à court terme, c’est-à-dire prédire une action future une seconde avant qu’elle ne se produise. Nous proposons d’utiliser des informations de buts hautement structurées afin d’anticiper les actions à venir. À cette fin, nous intégrons une branche supplémentaire de prédiction de but dans notre modèle et introduisons une fonction de perte de cohérence qui encourage les actions anticipées à s’aligner sur le but global poursuivi dans la vidéo. Nos expériences montrent l’efficacité de l’approche proposée et démontrent que notre méthode atteint des résultats de pointe sur deux grands jeux de données : Assembly101 et COIN.