Code Generation On Bigcodebench Complete
المقاييس
Pass@1
النتائج
نتائج أداء النماذج المختلفة على هذا المعيار القياسي
| Paper Title | ||
|---|---|---|
| GPT-4o-2024-05-13 | 61.1 | BigCodeBench: Benchmarking Code Generation with Diverse Function Calls and Complex Instructions |
| DeepSeek-Coder-V2-Instruct | 59.7 | BigCodeBench: Benchmarking Code Generation with Diverse Function Calls and Complex Instructions |
0 of 2 row(s) selected.