Raisonnement commun
L'objectif des tâches de raisonnement basé sur le sens commun est de permettre aux modèles d'aller au-delà de la reconnaissance de motifs et d'utiliser le sens commun ou les connaissances du monde réel pour raisonner. Cela vise à permettre aux modèles de comprendre des situations complexes, de prendre des décisions raisonnables et de faire des prédictions, ce qui améliore ainsi leur niveau d'intelligence et leurs performances dans des domaines tels que le traitement automatique des langues naturelles et les systèmes de dialogue.
WinoGrande
PaLM 540B (0-shot)
ARC (Challenge)
ARC (Easy)
ST-MoE-32B 269B (fine-tuned)
ReCoRD
DeBERTa-1.5B
CommonsenseQA
MUPPET Roberta Large
PARus
RuCoS
RWSD
BIG-bench (Disambiguation QA)
BIG-bench (Causal Judgment)
BIG-bench (Date Understanding)
BIG-bench (Sports Understanding)
Event2Mind test
EA-VQ-VAE
Russian Event2Mind
araneum word2vec (skipgram) + GRU
SWAG
DeBERTalarge
BIG-bench (Winowhy)
BIG-bench (Known Unknowns)
PaLM-540B (few-shot, k=5)
BIG-bench (Logical Sequence)
Chinchilla-70B (few-shot, k=5)
Event2Mind dev
CODAH
BERT Large
CrowdSource QA
Visual Dialog v0.9
NMN [kottur2018visual]
Visual Dialog v0.9
WinoGAViL
ViLT