تحدي فهم القراءة NarrativeQA

الفهم القرائي (RC) - بخلاف استرجاع المعلومات - يتطلب دمج المعلومات واستنتاج الأحداث والكائنات والعلاقات بينها عبر كامل الوثيقة. يتم استخدام الإجابة على الأسئلة بشكل تقليدي لتقييم قدرة الفهم القرائي، سواء في الوكلاء الاصطناعيين أو الأطفال الذين يتعلمون القراءة. ومع ذلك، فإن مجموعات البيانات والأدوات الحالية للفهم القرائي تهيمن عليها الأسئلة التي يمكن حلها من خلال اختيار الإجابات باستخدام معلومات سطحية (مثل تشابه السياق المحلي أو تكرار المصطلح العالمي)؛ وبالتالي، فإنها لا تختبر الجانب التكاملي الأساسي للفهم القرائي. لتشجيع التقدم في فهم أعمق للغة، نقدم مجموعة بيانات جديدة ومجموعة من المهام حيث يجب على القارئ الإجابة على أسئلة حول القصص من خلال قراءة كتب كاملة أو نصوص أفلام. تم تصميم هذه المهام بحيث يتطلب الإجابة على أسئلتها بنجاح فهم السرد الكامن بدلاً من الاعتماد على مطابقة الأنماط السطحية أو الوضوح. نوضح أن البشر يحلون هذه المهام بسهولة، بينما تجد النماذج التقليدية للفهم القرائي صعوبة في التعامل مع المهام المعروضة هنا. نوفر تحليلًا لمجموعة البيانات والتحديات التي تطرحها.