Logical Reasoning On Big Bench Strategyqa
Métriques
Accuracy
Résultats
Résultats de performance de divers modèles sur ce benchmark
Tableau comparatif
| Nom du modèle | Accuracy |
|---|---|
| palm-scaling-language-modeling-with-pathways-1 | 65.4 |
| training-compute-optimal-large-language | 68.3 |
| scaling-language-models-methods-analysis-1 | 61.0 |
| palm-scaling-language-modeling-with-pathways-1 | 73.9 |