HyperAIHyperAI

Command Palette

Search for a command to run...

CoQA : Un Défi de Réponse aux Questions en Conversation

Siva Reddy* Danqi Chen* Christopher D. Manning

Résumé

Les humains collectent des informations en s'engageant dans des conversations impliquant une série de questions et de réponses interconnectées. Pour que les machines puissent aider à la collecte d'informations, il est donc essentiel de les doter de la capacité de répondre à des questions conversationnelles. Nous présentons CoQA, un nouveau jeu de données conçu pour développer des systèmes de Question-Réponse Conversationnelle. Notre jeu de données comprend 127 000 questions avec leurs réponses, issues de 8 000 conversations portant sur des extraits textuels provenant de sept domaines variés. Les questions sont conversationnelles, et les réponses sont sous forme libre, accompagnées des preuves correspondantes mises en évidence dans le passage. Nous analysons CoQA en profondeur et montrons que les questions conversationnelles présentent des phénomènes complexes absents des jeux de données existants en compréhension de lecture, tels que la coréférence et le raisonnement pragmatique. Nous évaluons des modèles robustes en question-réponse conversationnelle et en compréhension de lecture sur CoQA. Le meilleur système obtient un score F1 de 65,4 %, soit 23,4 points derrière la performance humaine (88,8 %), ce qui indique qu'il reste beaucoup d'espace pour l'amélioration. Nous lançons CoQA comme un défi à la communauté sur http://stanfordnlp.github.io/coqa/


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp