Ensemble De Données De Référence Pour L'évaluation Des Domaines D'études SuperGPQA

SuperGPQA est un ensemble de données de référence permettant d'évaluer les performances des systèmes avancés de réponses aux questions. Il a été développé par l'équipe de projection artistique multimodale en 2025. Les résultats de l'article associé sont "SuperGPQA : étendre l'évaluation des LLM à 285 disciplines d'études supérieures". Cet ensemble de données se concentre sur le domaine du traitement du langage naturel et de l'évaluation de l'apprentissage automatique, et vise à tester la capacité de raisonnement et le niveau de connaissances du modèle à travers des problèmes interdisciplinaires complexes.

L'ensemble de données couvre 285 domaines d'études de niveau universitaire avec divers types de questions, notamment la biologie, la physique, la chimie et d'autres domaines scientifiques.