Code Generation On Bigcodebench Complete
Metriken
Pass@1
Ergebnisse
Leistungsergebnisse verschiedener Modelle zu diesem Benchmark
Vergleichstabelle
| Modellname | Pass@1 |
|---|---|
| bigcodebench-benchmarking-code-generation | 59.7 |
| bigcodebench-benchmarking-code-generation | 61.1 |