مجموعة بيانات معيارية لاستدلال الأسئلة البشرية HLE

HLE هي مجموعة بيانات مرجعية متعددة الوسائط للمشاكل البشرية، أصدرها مركز سلامة الذكاء الاصطناعي وScale AI بشكل مشترك. نتائج البحث ذات الصلة هي:الامتحان الأخير للبشرية"، يهدف إلى بناء نظام تقييم مغلق نهائي يغطي حدود المعرفة الإنسانية.

تحتوي مجموعة البيانات على 2500 سؤال تغطي عشرات الموضوعات مثل الرياضيات والعلوم الإنسانية والعلوم الطبيعية، بما في ذلك أسئلة الاختيار من متعدد وأسئلة الإجابة القصيرة المناسبة للتسجيل التلقائي.

توزيع الموضوع:

• الرياضيات (41%):المشاكل المجردة مثل الرياضيات المتقدمة، ونظرية الاحتمالات، وتصميم الخوارزميات.

• علوم الحاسوب/الذكاء الاصطناعي (10%):نظرية التعلم الآلي، التعقيد الحسابي، معالجة اللغة الطبيعية.

• العلوم الطبيعية (27%):الفيزياء (9%)، الكيمياء (7%)، الأحياء/الطب (11%)، التي تتضمن الفيزياء الكمومية، والتوليف العضوي، والآليات المرضية، وما إلى ذلك.

• العلوم الإنسانية/العلوم الاجتماعية (9%):أسئلة التحليل النقدي في الفلسفة والتاريخ والاقتصاد وعلم الاجتماع.

• الهندسة (4%) والتخصصات الأخرى (9%):يغطي التصميم الهندسي وتاريخ الفن والقضايا المتطورة متعددة التخصصات.

توزيع الانضباط