HyperAIHyperAI

Command Palette

Search for a command to run...

تعلم نموذج مطابقة سياق-رد فعال باستخدام المهام ذاتية الإشراف للحوار المستند إلى الاسترجاع

Ruijian Xu *1 Chongyang Tao *2 Daxin Jiang 2 Xueliang Zhao 3 Dongyan Zhao 1 Rui Yan 1

الملخص

بناء نظام حوار ذكي قادر على اختيار استجابة مناسبة وفقًا لسياق متعدد الأدوار هو مهمة صعبة للغاية. تركز الدراسات الحالية على بناء نموذج مطابقة السياق-الاستجابة باستخدام مجموعة متنوعة من الهندسات العصبية أو النماذج اللغوية المسبقة التدريب (PLMs) وغالبًا ما يتم التعلم مع مهمة واحدة لتنبؤ الاستجابة. ومع ذلك، فإن هذه الأساليب تتجاهل العديد من الإشارات التدريبية المحتملة الموجودة في بيانات الحوار، والتي قد تكون مفيدة لفهم السياق وإنتاج خصائص أفضل لتنبؤ الاستجابة. بالإضافة إلى ذلك، لا تزال الاستجابات المستخرجة من أنظمة الحوار القائمة التي يتم إشرافها بالطريقة التقليدية تواجه بعض التحديات الحرجة، بما في ذلك عدم التجانس والتناقض. لحل هذه المشكلات، نقترح في هذا البحث تعلم نموذج مطابقة السياق-الاستجابة باستخدام مهام ذاتية غير مراقبة تم تصميمها للبيانات الحوارية بناءً على النماذج اللغوية المسبقة التدريب. بشكل خاص، نقدم أربع مهام ذاتية غير مراقبة تشمل تنبؤ الجلسة التالية، وإعادة بناء الجملة، وكشف عدم التجانس، وتمييز التجانس، ونقوم بتدريب نموذج اختيار الاستجابة القائم على PLM مع هذه المهام المساعدة بطريقة متعددة المهام. بهذه الطريقة، يمكن للمهام المساعدة أن توجه عملية تعلم نموذج المطابقة لتحقيق نقطة أمثلة محلية أفضل واختيار استجابة أكثر ملاءمة. تشير نتائج التجارب على قاعدتين للمعايير إلى أن المهام الذاتية غير المراقبة المقترحة تحقق تحسينًا كبيرًا في اختيار الاستجابات المتعددة الأدوار في الحوارات القائمة على الاسترجاع، وأن نموذجنا حقق أفضل النتائج حتى الآن على كلا المجموعتين البيانات.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
تعلم نموذج مطابقة سياق-رد فعال باستخدام المهام ذاتية الإشراف للحوار المستند إلى الاسترجاع | مستندات | HyperAI