Code Generation On Dseval Leetcode
评估指标
Pass Rate
w/o Intact
w/o PE
评测结果
各个模型在此基准测试上的表现结果
比较表格
模型名称 | Pass Rate | w/o Intact | w/o PE |
---|---|---|---|
mlcopilot-unleashing-the-power-of-large | 42.5 | 42.5 | 62.5 |
模型 2 | 45.0 | 45.0 | 55.0 |
模型 3 | 32.5 | 32.5 | 50.0 |
模型 4 | 45.0 | 45.0 | 60.0 |
模型 5 | 57.5 | 57.5 | 70.0 |