HyperAIHyperAI

Command Palette

Search for a command to run...

GraPPa: التدريب المسبق المُعزّز بالقواعد لتحليل المعنى الجدولية

Tao Yu Chien-Sheng Wu Xi Victoria Lin Bailin Wang Yi Chern Tan Xinyi Yang Dragomir Radev Richard Socher Caiming Xiong

الملخص

نقدم نموذج GraPPa، وهو منهج فعّال للتدريب المسبق لتحليل المعنى الجداول، والذي يتعلم انحيازًا استنتاجيًا تراكبيًا في التمثيلات المشتركة للبيانات النصية والجداول. قمنا ببناء أزواج أسئلة-SQL اصطناعية على جداول عالية الجودة باستخدام قواعد سياقية حرة متزامنة (SCFG) التي تم استخلاصها من مجموعات بيانات موجودة لتحويل النص إلى SQL. تم تدريب نموذجنا على البيانات الاصطناعية باستخدام هدف جديد لربط النص بالهيكل (text-schema linking) يتنبأ بالدور النحوي لحقل الجدول في استعلام SQL لكل زوج سؤال-SQL. ولضمان الحفاظ على قدرة النموذج على تمثيل البيانات في العالم الحقيقي، أدرجنا أيضًا نموذجًا للنمذجة المُقنّعة للغة (MLM) على عدة مجموعات بيانات موجودة للجداول واللغة، بهدف تنظيم عملية التدريب المسبق. وعلى أربع معايير شائعة للتحليل المعنوي للجداول، سواء في البيئات المُدرَّبة بالكامل أو الضعيفة التدريب، تفوق GraPPa بشكل ملحوظ على RoBERTa-large عند استخدامه كطبقات تمثيل الميزات، وحقق نتائج جديدة قياسية على جميع هذه المعايير.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp