HyperAIHyperAI

Command Palette

Search for a command to run...

Pass@k

Date

Pass@k (Pass Rate at k Samples) est une métrique d'évaluation importante pour les tâches de génération de code dans le domaine du traitement du langage naturel. Elle mesure la proportion de cas où, parmi k échantillons générés, au moins un passe tous les cas de test, reflétant la capacité du modèle à générer du code exécutable et fonctionnellement correct ; elle constitue un critère d'évaluation fondamental dans le domaine de la génération de code. Elle est généralement rapportée sous forme de pourcentage ou de score compris entre 0 et 1. Cette métrique est largement utilisée dans les benchmarks et les articles connexes, et elle reflète efficacement les performances du modèle sur cette dimension. Plus la valeur est élevée, mieux c'est.

Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp