HyperAIHyperAI

Command Palette

Search for a command to run...

WildQA : Réponse à des questions sur des vidéos dans leur environnement naturel

Santiago Castro Naihao Deng Pingxuan Huang Mihai Burzo Rada Mihalcea

Résumé

Les jeux de données existants pour la compréhension vidéo se concentrent principalement sur les interactions humaines, en accordant peu d’attention aux scénarios « en situation réelle » où les vidéos sont enregistrées en extérieur. Nous proposons WILDQA, un jeu de données de compréhension vidéo constitué d’enregistrements réalisés en milieu extérieur. En plus de la tâche classique de réponse aux questions sur vidéo (Video QA), nous introduisons une nouvelle tâche : la sélection des preuves visuelles pertinentes pour une question et une réponse données (Video Evidence Selection). À travers des évaluations menées sur une large gamme de modèles de référence, nous démontrons que WILDQA pose de nouveaux défis aux communautés de recherche en vision et en langage. Le jeu de données est disponible à l’adresse suivante : https://lit.eecs.umich.edu/wildqa/.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
WildQA : Réponse à des questions sur des vidéos dans leur environnement naturel | Articles | HyperAI