Common Sense Reasoning
공통 상식 추론 과제의 목표는 모델이 패턴 인식을 넘어 공통 상식이나 세계 지식을 활용하여 추론할 수 있도록 하는 것입니다. 이는 모델이 복잡한 상황을 이해하고 합리적인 판단과 예측을 내릴 수 있게 하여 자연어 처리 및 대화 시스템 등의 분야에서 지능 수준과 응용 효과를 향상시키는 것을 목표로 합니다.
ARC (Challenge)
ARC (Easy)
GAL 120B (0-shot)
BIG-bench (Causal Judgment)
BIG-bench (Date Understanding)
BIG-bench (Disambiguation QA)
BIG-bench (Known Unknowns)
PaLM-540B (few-shot, k=5)
BIG-bench (Logical Sequence)
Chinchilla-70B (few-shot, k=5)
BIG-bench (Sports Understanding)
BIG-bench (Winowhy)
CODAH
BERT Large
CommonsenseQA
QA-GNN
CrowdSource QA
Event2Mind dev
Event2Mind test
EA-VQ-VAE
PARus
ReCoRD
ST-MoE-32B 269B (fine-tuned)
RuCoS
Russian Event2Mind
araneum word2vec (skipgram) + GRU
RWSD
SWAG
DeBERTalarge
Visual Dialog v0.9
Visual Dialog v0.9
NMN [kottur2018visual]
WinoGAViL
ViLT
WinoGrande
PaLM 540B (0-shot)