Multiple Choice Qa
자연어 처리(NLP)는 컴퓨터가 인간의 언어를 이해, 해석하고 생성할 수 있도록 하는 인공지능의 한 분야입니다. 이 기술은 인간과 기계 간의 커뮤니케이션 격차를 줄이고, 정보 교환의 효율성과 품질을 향상시키는 것을 목표로 합니다. NLP의 활용 가치는 매우 넓으며, 지능형 고객 서비스, 감성 분석, 기계 번역, 텍스트 요약 등 다양한 분야에서 적용되며, 이는 사회의 정보화와 기업의 지능화를 크게 촉진하고 있습니다.
BIG-bench (Hyperbaton)
BIG-bench (Movie Recommendation)
BIG-bench (Navigate)
BIG-bench (Novel Concepts)
BIG-bench (Ruin Names)
FrenchMedMCQA
CamemBERT
IndicGLUE WSTP Pa
MedMCQA
Meditron-70B (CoT + SC)
MMLU (Abstract Algebra)
GAL 30B (zero-shot)
MMLU (Anatomy)
Med-PaLM 2 (ER)
MMLU (Astronomy)
Chinchilla (few-shot, k=5)
MMLU (Clinical Knowledge)
MMLU (College Biology)
Chinchilla (few-shot, k=5)
MMLU (College Chemistry)
Chinchilla (few-shot, k=5)
MMLU (College Computer Science)
Chinchilla (few-shot, k=5)
MMLU (College Mathematics)
GAL 120B (zero-shot)
MMLU (College Medicine)
MMLU (College Physics)
MMLU (Econometrics)
Gopher (few-shot, k=5)
MMLU (Electrical Engineer)
GAL 120B (zero-shot)
MMLU (Elementary Mathematics)
Chinchilla (few-shot, k=5)
MMLU (Formal Logic)
Gopher (few-shot, k=5)
MMLU (High School Biology)
Chinchilla (few-shot, k=5)
MMLU (High School Chemistry)
Chinchilla (few-shot, k=5)
MMLU (High School Computer Science)
GAL 120B (zero-shot)
MMLU (High School Mathematics)
GAL 120B (zero-shot)
MMLU (High School Physics)
MMLU (High School Statistics)
MMLU (Machine Learning)
Chinchilla (few-shot, k=5)
MMLU (Medical Genetics)
MMLU (Professional medicine)