RubricHub est un jeu de données de tâches génératives à grande échelle et multidomaine, publié en 2026 par Li Auto en collaboration avec l'Université du Zhejiang. Parmi les articles de recherche associés, on peut citer… RubricHub : un ensemble de données de grilles d’évaluation complet et hautement discriminant grâce à une génération automatisée du plus grossier au plus fin Cet ensemble de données fournit une supervision de haute qualité basée sur des critères de notation pour les tâches de génération ouvertes. Il est construit à l'aide d'un cadre de génération automatisé de critères de notation, allant du grossier au fin, intégrant des stratégies telles que la synthèse guidée par des principes, l'agrégation multi-modèles et l'évolution de la difficulté afin de produire des critères d'évaluation complets et hautement discriminants.

Composition de l'ensemble de données:

• RuRL comprend une liste d'invites au format de formation VeRL, des sources de données, des objectifs de capacité, un modèle de récompense et des informations supplémentaires.
• RuFT inclut les sources de données, les indications d'entrée du modèle, les réponses générées par le modèle, les identifiants d'échantillons, les critères de notation et les détails de notation.