مجموعة بيانات DRACO المعيارية للبحوث المعمقة متعددة المجالات هي مجموعة بيانات أصدرها فريق Perplexity لتقييم مهام البحث المعقدة. تتضمن الأوراق البحثية ذات الصلة ما يلي... دراكو: معيار متعدد المجالات لدقة البحث المعمق وشموليته وموضوعيتهالهدف هو التقييم المنهجي للقدرات الشاملة لأنظمة البحث المتعمق من حيث الدقة والشمولية والموضوعية. تحتوي هذه المجموعة من البيانات على 100 مهمة بحثية معقدة، تغطي 40 دولة ومنطقة عبر خمس قارات، وتشمل 10 مجالات تطبيقية رئيسية، منها التمويل، والتسوق/مقارنة المنتجات، والأوساط الأكاديمية، والتكنولوجيا. تتوافق كل مهمة مع مشكلة استرجاع وتحليل معلومات متعددة الخطوات والمصادر، ومرفقة بمعايير تقييم صممها وراجعها 26 خبيرًا في المجال. يحتوي كل معيار على ما يقارب 40 مقياس تقييم في المتوسط، مما يوفر تقييمًا دقيقًا لمخرجات النموذج من أربعة أبعاد: الدقة الواقعية، ونطاق التحليل وعمقه، وجودة العرض، وجودة الاستشهاد. يوضح الشكل التالي توزيع المهام حسب المجال:

حقول البيانات:

• المعرّف: معرّف فريد للمهمة
• المجال: المجال الذي تنتمي إليه المهمة
• المشكلة: استفسار بحثي كامل يتطلب إجابة
• الإجابة: يتم ترميز معايير التقييم في JSON وتتضمن المعايير المحددة لكل بُعد من أبعاد التقييم.