HyperAIHyperAI

Command Palette

Search for a command to run...

تعلم مراقب من تمثيلات الجمل الشاملة من بيانات الاستدلال اللغوي

Alexis Conneau; Douwe Kiela; Holger Schwenk; Loic Barrault; Antoine Bordes

الملخص

تعتمد العديد من أنظمة المعالجة اللغوية الطبيعية الحديثة على تمثيلات الكلمات (word embeddings) التي تم تدريبها بطريقة غير مراقبة على مجموعات بيانات كبيرة كمميزات أساسية. ومع ذلك، لم تكن الجهود الرامية إلى الحصول على تمثيلات لقطع نص أكبر، مثل الجمل، ناجحة بنفس الدرجة. لم تصل العديد من المحاولات لتعلم تمثيلات غير مراقبة للجمل إلى مستوى الأداء المرضي الكافي لتكون معتمدة بشكل واسع. في هذا البحث، نوضح كيف يمكن لتمثيلات الجمل الشاملة التي يتم تدريبها باستخدام البيانات المراقبة من مجموعة بيانات الاستدلال اللغوي الطبيعي لجامعة ستانفورد أن تتخطى باستمرار طرق التعلم غير المراقبة مثل متجهات SkipThought في مجموعة واسعة من مهمات النقل. تماماً كما يستخدم الرؤية الحاسوبية ImageNet للحصول على مميزات يمكن نقلها إلى مهام أخرى، فإن عملنا يشير إلى صلاحية الاستدلال اللغوي الطبيعي للتعلم النقل إلى مهام أخرى في مجال المعالجة اللغوية الطبيعية. إن كودرنا متاح للجمهور.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp