Accueil Actualités Tutoriels Ensembles de données Événements Wiki SOTA Modèles LLM

Français

Open Domain Question Answering On Kilt Eli5

Métriques

F1

KILT-F1

KILT-RL

R-Prec

ROUGE-L

Recall@5

Résultats

Résultats de performance de divers modèles sur ce benchmark

Tableau comparatif

Nom du modèle	F1	KILT-F1	KILT-RL	R-Prec	ROUGE-L	Recall@5
kilt-a-benchmark-for-knowledge-intensive	16.1	0.0	0.0	0.0	19.08	0.0
Modèle 2	0.0	0.0	0.0	15.83	0.0	25.49
Modèle 3	0.0	0.0	0.0	17.5	0.0	25.54
Modèle 4	15.91	2.38	2.46	14.83	16.45	27.69
Modèle 5	14.51	1.79	1.69	11.0	14.05	22.92
hurdles-to-progress-in-long-form-question	22.88	2.34	2.36	10.67	23.19	24.56
Modèle 7	19.23	0.0	0.0	0.0	20.55	0.0
Modèle 8	21.62	0.0	0.0	0.0	18.66	0.0
Modèle 9	15.29	0.0	0.0	0.0	15.76	0.0
Modèle 10	27.13	3.0	2.62	10.83	24.53	27.25
Modèle 11	0.0	0.0	0.0	18.33	0.0	28.21
Modèle 12	16.4	0.0	0.0	0.0	17.67	0.0
Modèle 13	17.88	2.01	1.9	10.67	17.41	26.92
Modèle 14	14.8	0.0	0.0	0.0	16.88	0.0
Modèle 15	17.07	0.0	0.0	0.0	15.45	0.0
Modèle 16	0.0	0.0	0.0	15.5	0.0	27.51