Command Palette
Search for a command to run...
Pass@k
Date
Balises
Pass@k (Pass Rate at k Samples) est une métrique d'évaluation importante pour les tâches de génération de code dans le domaine du traitement du langage naturel. Elle mesure la proportion de cas où, parmi k échantillons générés, au moins un passe tous les cas de test, reflétant la capacité du modèle à générer du code exécutable et fonctionnellement correct ; elle constitue un critère d'évaluation fondamental dans le domaine de la génération de code. Elle est généralement rapportée sous forme de pourcentage ou de score compris entre 0 et 1. Cette métrique est largement utilisée dans les benchmarks et les articles connexes, et elle reflète efficacement les performances du modèle sur cette dimension. Plus la valeur est élevée, mieux c'est.
Créer de l'IA avec l'IA
De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.