Text To Code Generation On Codexglue Concode
Metriken
BLEU
CodeBLEU
EM
Ergebnisse
Leistungsergebnisse verschiedener Modelle zu diesem Benchmark
Vergleichstabelle
Modellname | BLEU | CodeBLEU | EM |
---|---|---|---|
codet5-identifier-aware-unified-pre-trained | 41.48 | 44.10 | 22.70 |
codexglue-a-machine-learning-benchmark | 32.79 | 27.74 | 20.1 |