Code Generation On Taco Code
Metriken
easy pass@1
Ergebnisse
Leistungsergebnisse verschiedener Modelle zu diesem Benchmark
Vergleichstabelle
| Modellname | easy pass@1 |
|---|---|
| taco-topics-in-algorithmic-code-generation | 9.32% |
| taco-topics-in-algorithmic-code-generation | 11.6% |
| taco-topics-in-algorithmic-code-generation | 31.50% |