Fact Verification On Kilt Fever

Accuracy

KILT-AC

R-Prec

Recall@5

Résultats

Résultats de performance de divers modèles sur ce benchmark

Tableau comparatif

Nom du modèle	Accuracy	KILT-AC	R-Prec	Recall@5
Modèle 1	85.58	64.41	75.6	84.95
Modèle 2	89.54	71.28	81.45	89.56
Modèle 3	66.1	41.88	49.24	70.16
Modèle 4	69.41	0.0	0.0	0.0
Modèle 5	70.71	0.0	0.0	0.0
Modèle 6	12.57	0.0	0.0	0.0
Modèle 7	78.93	0.0	0.0	0.0
Modèle 8	71.42	0.0	0.0	0.0
Modèle 9	88.99	65.68	74.77	87.89
Modèle 10	72.34	0.0	0.0	0.0
kilt-a-benchmark-for-knowledge-intensive	76.3	0.0	0.0	0.0
kilt-a-benchmark-for-knowledge-intensive	86.31	53.45	61.94	75.55
Modèle 13	71.38	0.0	0.0	0.0
Modèle 14	69.68	58.58	72.93	73.52
re2g-retrieve-rerank-generate-2	89.55	78.53	88.92	92.52
Modèle 16	23.01	0.0	0.0	0.0
Modèle 17	86.74	47.68	55.33	74.29
Modèle 18	71.12	0.0	0.0	0.0
Modèle 19	86.32	63.94	74.48	87.52
Modèle 20	0.0	0.0	74.48	87.52
Modèle 21	0.0	0.0	83.64	88.15
Modèle 22	88.45	0.0	0.0	0.0
Modèle 23	61.6	0.0	0.0	0.0
Modèle 24	71.24	0.0	0.0	0.0
Modèle 25	71.58	0.0	0.0	0.0
Modèle 26	67.98	0.0	0.0	0.0
Modèle 27	68.43	0.0	0.0	0.0
Modèle 28	0.0	0.0	84.45	88.62
Modèle 29	33.58	0.0	0.0	0.0
Modèle 30	69.71	0.0	0.0	0.0
Modèle 31	89.12	0.0	0.0	0.0
Modèle 32	76.26	0.0	0.0	0.0
Modèle 33	0.0	0.0	84.07	89.41