HyperAIHyperAI
منذ 2 أشهر

الترشيح الجماعي لتحليل التركيب بدون إشراف

Behzad Shayegh; Yanshuai Cao; Xiaodan Zhu; Jackie C.K. Cheung; Lili Mou
الترشيح الجماعي لتحليل التركيب بدون إشراف
الملخص

نقوم بدراسة مهمة تحليل التركيب غير المشرف (unsupervised constituency parsing)، والتي تنظم الكلمات والعبارات في جملة إلى هيكل هرمي دون استخدام بيانات مصحوبة بالشروح اللغوية. نلاحظ أن المحاليل غير المشرفة الحالية تلتقط جوانب مختلفة من هيكلية التحليل، والتي يمكن استغلالها لتعزيز أداء التحليل غير المشرف. لهذا الغرض، نقترح مفهوم "متوسط الأشجار" (tree averaging)، على أساسه نقترح طريقة جديدة للجمع (ensemble method) لتحليل التركيب غير المشرف. لتحسين كفاءة الاستدلال، نقوم بتقريب معرفة الجمع إلى نموذج الطالب؛ حيث يعد عملية الجمع ثم التقريب طريقة فعالة للتخفيف من مشكلة الإفراط في التسوية (over-smoothing) الموجودة في الطرق الشائعة لتقريب متعدد المعلمين. تظهر التجارب أن طريقتنا تتفوق على جميع النهج السابقة، مما يثبت بشكل مستمر فعاليتها ومتانتها عبر تشغيلات مختلفة ومعايير جمع مختلفة وفي ظروف تحول المجال (domain-shift conditions).