HyperAIHyperAI

Command Palette

Search for a command to run...

مجموعة بيانات تقييم التعليمات العكسية IFEval-Inverse

التاريخ

منذ 2 أشهر

المؤسسة

جامعة نانجينغ
جامعة بكين
بذرة بايت دانس

رابط الورقة البحثية

2509.04292

انضم إلى مجتمع Discord

*تدعم مجموعة البيانات هذه الاستخدام عبر الإنترنت.انقر هنا للقفز.

IFEval-Inverse هي مجموعة بيانات لتقييم التعليمات التنافسية لنماذج اللغات الكبيرة، أصدرتها شركة ByteDance Seed عام ٢٠٢٥ بالتعاون مع جامعة نانجينغ وجامعة تسينغهوا ومؤسسات أخرى. نتائج البحث ذات الصلة هي:التقييم العكسي IFEval: هل يستطيع طلاب الماجستير في القانون التخلص من اتفاقيات التدريب العنيدة من أجل اتباع التعليمات الحقيقية؟"، والذي يهدف إلى اختبار ما إذا كان النموذج قادرًا على كسر جمود التدريب وتحقيق متابعة التعليمات الحقيقية عند مواجهة تعليمات عكسية أو غير طبيعية.

تحتوي هذه المجموعة من البيانات على 1012 عينة أسئلة ثنائية اللغة عالية الجودة باللغتين الصينية والإنجليزية، تغطي ثمانية أنواع من تحديات التعليم غير الاعتيادية، بما في ذلك تصحيح الأسئلة، والأخطاء النصية المتعمدة، والأكواد غير المُعلّقة، والتنسيق غير الاعتيادي، والإجابات غير الصحيحة المتعمدة، والأسئلة الإرشادية، ومراجعات التعليمات أثناء الدورة، والإجابة على الأسئلة الافتراضية، وذلك عبر 23 مجالًا مختلفًا. تخضع كل عينة لمزيج من الفحص والتحقق بين الإنسان والآلة، وتستخدم آلية التقييم الآلي "ماجستير في القانون كقاضي". هذا يجعلها مناسبة لتقييم وتحسين قابلية تكيف النماذج ومتانتها في سيناريوهات التعليم غير التقليدية، كما توفر معيارًا مهمًا للأبحاث المتعلقة بتخفيف القصور الذاتي المعرفي للنماذج.

بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — عجّل تطوير الذكاء الاصطناعي الخاص بك من خلال البرمجة المشتركة المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة المشتركة بالذكاء الاصطناعي
وحدات معالجة رسومات جاهزة
أفضل الأسعار
ابدأ الآن

Hyper Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
مجموعة بيانات تقييم التعليمات العكسية IFEval-Inverse | مجموعات البيانات | HyperAI