LexGLUE: مجموعة بيانات معيارية لفهم اللغة القانونية باللغة الإنجليزية
تُعبّر القوانين وتأويلاتها، والحجج القانونية والاتفاقات، بشكلٍ نموذجي عن طريق الكتابة، مما يؤدي إلى إنتاج كميات ضخمة من النصوص القانونية. وتصبح عملية تحليل هذه النصوص، التي تمثل محور الممارسة القانونية، أكثر تعقيدًا مع تزايد حجم هذه المجموعات. ويمكن لتقنيات فهم اللغة الطبيعية (NLU) أن تكون أداة قيمة لدعم الممارسين القانونيين في هذه الجهود. ومع ذلك، فإن فائدتها تعتمد إلى حد كبير على ما إذا كانت النماذج الحالية المتميزة قادرة على التعميم عبر مهام متنوعة في المجال القانوني. وللإجابة على هذا السؤال المفتوح حاليًا، نقدم معيار تقييم فهم اللغة العام القانوني (LexGLUE)، وهو مجموعة من المجموعات البيانات لتقييم أداء النماذج عبر مجموعة متنوعة من المهام المتعلقة بفهم اللغة الطبيعية في المجال القانوني بطريقة معيارية. كما نقدم تقييمًا وتحليلًا لعدة نماذج عامة ونماذج موجهة نحو المجال القانوني، مما يُظهر أن النماذج المخصصة للقانون تُقدّم تحسينات مستمرة في الأداء عبر مهام متعددة.