HyperAI

Multiple Choice Qa

Benchmark-Liste

Alle Benchmarks für diese Aufgabe

mmlu-elementary-mathematics
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
mmlu-college-biology
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
mmlu-high-school-biology
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
mmlu-college-chemistry
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
mmlu-high-school-chemistry
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
mmlu-college-computer-science
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
mmlu-high-school-mathematics
Bestes Modell: GAL 120B (zero-shot)

Metriken

Details anzeigen
mmlu-electrical-engineer
Bestes Modell: GAL 120B (zero-shot)

Metriken

Details anzeigen
mmlu-formal-logic
Bestes Modell: Gopher (few-shot, k=5)

Metriken

Details anzeigen
medmcqa
Bestes Modell: Meditron-70B (CoT + SC)

Metriken

Details anzeigen
frenchmedmcqa
Bestes Modell: CamemBERT

Metriken

Details anzeigen
mmlu-anatomy
Bestes Modell: Med-PaLM 2 (ER)

Metriken

Details anzeigen
mmlu-abstract-algebra
Bestes Modell: GAL 30B (zero-shot)

Metriken

Details anzeigen
mmlu-econometrics
Bestes Modell: Gopher (few-shot, k=5)

Metriken

Details anzeigen
mmlu-high-school-computer-science
Bestes Modell: GAL 120B (zero-shot)

Metriken

Details anzeigen
mmlu-machine-learning
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
mmlu-college-mathematics
Bestes Modell: GAL 120B (zero-shot)

Metriken

Details anzeigen
mmlu-astronomy
Bestes Modell: Chinchilla (few-shot, k=5)

Metriken

Details anzeigen
indicglue-wstp-pa

Metriken

Details anzeigen
mmlu-college-physics

Metriken

Details anzeigen
mmlu-high-school-physics

Metriken

Details anzeigen
mmlu-high-school-statistics

Metriken

Details anzeigen
mmlu-clinical-knowledge

Metriken

Details anzeigen
mmlu-professional-medicine

Metriken

Details anzeigen
mmlu-college-medicine

Metriken

Details anzeigen
big-bench-hyperbaton

Metriken

Details anzeigen
big-bench-movie-recommendation

Metriken

Details anzeigen
big-bench-navigate

Metriken

Details anzeigen
big-bench-ruin-names

Metriken

Details anzeigen
big-bench-novel-concepts

Metriken

Details anzeigen
mmlu-medical-genetics

Metriken

Details anzeigen