Ensemble De Données bAbi Sur Les Réponses Aux Questions Et La Compréhension De Texte

* Cet ensemble de données est disponible en ligne.Cliquez ici pour sauter.

Les tâches QA bAbI sont des ensembles de données d'entraînement pour la réponse aux questions et la compréhension de texte dans le projet bAbI. Ils servent à tester la première série de 20 tâches de compréhension et de raisonnement de texte. Chaque tâche comporte 1 000 questions de formation et 1 000 questions de test.

L'ensemble de données se compose d'un ensemble de contextes sur la base desquels plusieurs paires question-réponse peuvent être utilisées. Il existe actuellement plusieurs répertoires :

• en / – Tâches en anglais, lisibles par l’homme ;
• hn/ – Affectation en hindi, lisible par l’homme ;
• Shuffle/ – Effectuez la même tâche avec des lettres aléatoires, qui ne sont pas lisibles par les humains et ne peuvent pas être directement utilisées par les analyseurs et les tagueurs existants, rendant ainsi l'apprenant plus dépendant des données de formation fournies.
• La même tâche dans trois formats : en-10k/, shuffled – 10k/ et hn – 10k/, avec 10 000 exemples d’entraînement.

L'ensemble de données des tâches QA bAbI a été publié par Jason Weston de Google, Antoine Bordes de Facebook et d'autres en 2015. L'article connexe est « Vers une réponse aux questions complète par l'IA : un ensemble de tâches prérequises ».