L'ensemble de données HotpotQA est un ensemble de données de questions-réponses à grande échelle collectées sur Wikipédia en anglais, comprenant 113 000 questions participatives. Pour répondre à ces questions, vous devez vous référer aux paragraphes d’introduction de deux articles de Wikipédia. Chaque question se compose de deux paragraphes d'or et de listes de phrases tirées de parties des paragraphes qui fournissent des faits à l'appui jugés nécessaires pour répondre à la question.

L'ensemble de données présente les caractéristiques suivantes :

1. Les questions nécessitent de rechercher et de raisonner dans plusieurs documents justificatifs pour y répondre ;
2. Les problèmes sont divers et ne sont limités par aucune base de connaissances ou schéma de connaissances préexistant ;
3. L'ensemble de données fournit des faits justificatifs au niveau des phrases nécessaires au raisonnement, permettant aux systèmes d'assurance qualité de raisonner et d'expliquer les prédictions sous une supervision stricte ;
4. Cet ensemble de données fournit un nouveau type de problème de comparaison de faits pour tester la capacité des systèmes d'assurance qualité à extraire les faits pertinents et à effectuer les comparaisons nécessaires.