فهم متعدد المهام للغة

فهم اللغة متعدد المهام (MTLU) يشير إلى قدرة نموذج واحد على التعامل مع مهام معالجة اللغة الطبيعية المتعددة في وقت واحد، بهدف تعزيز تعميم النموذج وأدائه في نقل المعرفة بين المهام. الهدف من MTLU هو تحسين أداء النموذج عبر مهام اللغة المختلفة من خلال التمثيلات المشتركة ونقل المعرفة، مما يحقق فهمًا للغة أكثر كفاءة وشمولية. قيمة تطبيقه تكمن في تقليل تكاليف تدريب النماذج، وتحسين كفاءة معالجة المهام، وملاءمته للمواقف التطبيقية الحقيقية المعقدة والمتنوعة.

MMLU

ds-r1(671b)

BBH-nlp

Flan-PaLM 540B (3-shot, fine-tuned, CoT + SC)

MGSM

BBH-alg

code-davinci-002 175B (CoT)

MMLU (5-Shot)

Sakalti/ultiima-78B