HyperAIHyperAI

Command Palette

Search for a command to run...

Tout sur les graphes de connaissances pour les actions

Pallabi Ghosh Nirat Saini Larry S. Davis Abhinav Shrivastava

Résumé

Les systèmes actuels de reconnaissance d’actions nécessitent de grandes quantités de données d’entraînement pour identifier correctement une action. Des travaux récents ont exploré le paradigme de l’apprentissage zéro-shot et peu-shot afin d’apprendre des classificateurs pour des catégories non vues ou peu étiquetées. Inspirés de paradigmes similaires en reconnaissance d’objets, ces approches exploitent des sources externes de connaissance (par exemple, des graphes de connaissances issus de domaines linguistiques). Toutefois, contrairement aux objets, il n’est pas clair quelle est la meilleure représentation de connaissance pour les actions. Dans ce papier, nous visons à mieux comprendre les graphes de connaissances (KG) pouvant être exploités pour la reconnaissance d’actions zéro-shot et peu-shot. Plus précisément, nous étudions trois mécanismes différents de construction de graphes de connaissances : les embeddings d’actions, les embeddings action-objet, et les embeddings visuels. Nous présentons une analyse approfondie de l’impact de différents graphes de connaissances dans diverses configurations expérimentales. Enfin, afin de faciliter une étude systématique des approches zéro-shot et peu-shot, nous proposons un nouveau paradigme d’évaluation amélioré basé sur les jeux de données UCF101, HMDB51 et Charades, permettant une transfert de connaissance à partir de modèles entraînés sur Kinetics.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp