تحليل الاعتماد العصبي غير المشرف من الدرجة الثانية

معظم مُحلِّلات الاعتماد غير المُشرف عليها تعتمد على نماذج توليدية احتمالية من الدرجة الأولى التي تأخذ بعين الاعتبار فقط المعلومات المحلية بين الوالد والطفل. مستوحاةً من مُحلِّلات الاعتماد المُشرف عليها من الدرجة الثانية، اقترحنا توسيعًا من الدرجة الثانية لنماذج الاعتماد العصبية غير المُشرف عليها يدمج معلومات الجد-الطفل أو الأشقاء. كما اقترحنا تصميمًا جديدًا لمعلمة النموذج العصبي وطرق التحسين للنماذج المعتمدة. في النماذج من الدرجة الثانية، يزداد عدد قواعد القواعد النحوية بمعدل مكعب مع زيادة حجم المفردات، مما يجعل تدريب النماذج المعجمية التي قد تحتوي على آلاف الكلمات أمرًا صعبًا. لتجاوز هذه المشكلة مع الاستفادة من كلٍ من التحليل النحوي من الدرجة الثانية والتعمق في المعنى، نستخدم إطار العمل القائم على الاتفاق لتدريب نموذجين بشكل مشترك: نموذج غير معجمي من الدرجة الثانية ونموذج معجمي من الdehyde الأولى. أظهرت التجارب على عدة مجموعات بيانات فعالية نماذجنا من الدرجة الثانية مقارنة بالأساليب الأكثر تقدمًا حديثًا. حقق نموذجنا المشترك تحسنًا بنسبة 10% عن أفضل محلل اعتماد سابق على مجموعة اختبار WSJ الكاملة (Wall Street Journal).