HyperAI

Code Generation On Taco Code

Métriques

easy pass@1

Résultats

Résultats de performance de divers modèles sur ce benchmark

Tableau comparatif
Nom du modèleeasy pass@1
taco-topics-in-algorithmic-code-generation9.32%
taco-topics-in-algorithmic-code-generation11.6%
taco-topics-in-algorithmic-code-generation31.50%