Common Sense Reasoning On Parus
평가 지표
Accuracy
평가 결과
이 벤치마크에서 각 모델의 성능 결과
비교 표
| 모델 이름 | Accuracy |
|---|---|
| 모델 1 | 0.574 |
| unreasonable-effectiveness-of-rule-based | 0.498 |
| russiansuperglue-a-russian-language | 0.486 |
| 모델 4 | 0.908 |
| 모델 5 | 0.508 |
| 모델 6 | 0.766 |
| 모델 7 | 0.528 |
| unreasonable-effectiveness-of-rule-based | 0.478 |
| 모델 9 | 0.598 |
| 모델 10 | 0.508 |
| 모델 11 | 0.584 |
| mt5-a-massively-multilingual-pre-trained-text | 0.504 |
| unreasonable-effectiveness-of-rule-based | 0.48 |
| 모델 14 | 0.562 |
| russiansuperglue-a-russian-language | 0.982 |
| 모델 16 | 0.492 |
| 모델 17 | 0.66 |
| 모델 18 | 0.498 |
| 모델 19 | 0.498 |
| 모델 20 | 0.476 |
| 모델 21 | 0.676 |
| 모델 22 | 0.554 |