HyperAIHyperAI
منذ 17 أيام

استنتاج شجرة خفية غير مراقبة باستخدام مُشفِّرات تلقائية متكررة عميقة من الداخل والخارج

{Andrew McCallum, Patrick Verga, Mohit Yadav, Andrew Drozdov, Mohit Iyyer}
استنتاج شجرة خفية غير مراقبة باستخدام مُشفِّرات تلقائية متكررة عميقة من الداخل والخارج
الملخص

نقدم نموذج التشفير التلقائي المتكرر من الداخل إلى الخارج العميق (DIORA)، وهو أسلوب بالكامل غير مُعلَّم لاكتشاف البنية النحوية، ويتعلم في الوقت نفسه تمثيلات للعناصر الفرعية ضمن الشجرة المستنتجة. يعتمد نهجنا على توقع كل كلمة في الجملة المدخلة بناءً على بقية الكلمات في الجملة. أثناء التدريب، نستخدم البرمجة الديناميكية لاستكشاف جميع الأشجار الثنائية الممكنة للجملة، بينما نستخدم خوارزمية CKY أثناء الاستنتاج لاستخراج التحليل ذي الدرجة العالية. وقد تفوق DIORA على النتائج السابقة المُبلغ عنها في تحليل البنية الثنائية غير المُعلَّم على مجموعة بيانات المعيار WSJ.