Ask2Transformers: تصنيف المجالات بدون تدريب مسبق باستخدام نماذج اللغة المدربة مسبقًا

في هذا البحث، نقدم نظامًا يستغل نماذج لغوية مسبقة التدريب مختلفة لتعيين علامات المجال لمجموعات المعاني في WordNet دون أي نوع من الإشراف. بالإضافة إلى ذلك، ليس النظام مقيدًا باستخدام مجموعة معينة من علامات المجال. نستفيد من المعرفة المشفرة داخل نماذج اللغة المسبقة التدريب المختلفة وصيغ المهام لاستنتاج علامة المجال لتعريف معين في WordNet. يحقق النظام المقترح بدون إشراف (zero-shot) مستوى جديد من الطليعية على مجموعة البيانات الإنجليزية المستخدمة في التقييم.