Code Generation On Taco Code
평가 지표
easy pass@1
평가 결과
이 벤치마크에서 각 모델의 성능 결과
모델 이름 | easy pass@1 | Paper Title | Repository |
|---|---|---|---|
| CodeLlama-7B-Python | 9.32% | TACO: Topics in Algorithmic COde generation dataset | |
| Starcoder-15.5B | 11.6% | TACO: Topics in Algorithmic COde generation dataset | |
| GPT-4 | 31.50% | TACO: Topics in Algorithmic COde generation dataset |
0 of 3 row(s) selected.