Code Generation On Bigcodebench Instruct
Metriken
Pass@1
Ergebnisse
Leistungsergebnisse verschiedener Modelle zu diesem Benchmark
Vergleichstabelle
| Modellname | Pass@1 |
|---|---|
| bigcodebench-benchmarking-code-generation | 48.2 |
| bigcodebench-benchmarking-code-generation | 51.1 |