تعلم التمثيلات الموزعة للنصوص والكيانات من قاعدة المعرفة

نقوم بوصف نموذج شبكة عصبية يتعلم بشكل مشترك التمثيلات الموزعة للنصوص والكيانات في قاعدة المعرفة (KB). عند تقديم نص من قاعدة المعرفة، ندرب النموذج المقترح على التنبؤ بالكيانات ذات الصلة بالنص. تم تصميم النموذج ليكون عامًا، مع القدرة على التعامل بسهولة مع مهام مختلفة في معالجة اللغة الطبيعية (NLP). ندرب النموذج باستخدام مكتبة كبيرة من النصوص وشروح الكيانات المستخرجة من ويكيبيديا. قدمنا تقييمًا للنموذج في ثلاثة مهام مهمة في معالجة اللغة الطبيعية (أي تشابه النصوص الجملية، ربط الكيانات، وإجابات الأسئلة البسيطة) والتي تتضمن إعدادات غير مراقبة ومراقبة. نتيجة لذلك، حققنا أفضل النتائج الحالية في جميع هذه المهام الثلاثة. الرمز البرمجي للنموذج والأنماط المدربة متاحة بشكل عام للاستخدام في البحث الأكاديمي المزيد.