HyperAIHyperAI

Command Palette

Search for a command to run...

إطار تناقضي على مستوى الرموز لترجمة لغة الإشارة

Biao Fu Peigen Ye Liang Zhang Pei Yu Cong Hu Yidong Chen Xiaodong Shi

الملخص

تمثيل لغة الإشارة (SLT) يُعد تقنية واعدة تُسهم في سد الفجوة التواصلية بين الصم والسامعين. في الآونة الأخيرة، اعتمدت الباحثون مناهج الترجمة الآلية العصبية (NMT)، التي تتطلب عادةً مجموعات بيانات ضخمة للتدريب، لتحقيق الترجمة في لغة الإشارة. ومع ذلك، فإن مجموعات البيانات المتاحة علنًا لترجمة لغة الإشارة محدودة جدًا، مما يؤدي إلى انهيار تمثيلات الرموز (tokens) ودقة غير دقيقة في الرموز المولدة. ولتخفيف هذه المشكلة، نقترح منهجية ConSLT، وهي إطار جديد للتعلم المقارن على مستوى الرموز (Token-level \textbf{Con}trastive learning) لترجمة لغة الإشارة (\textbf{S}ign \textbf{L}anguage \textbf{T}ranslation)، والذي يتعلم تمثيلات فعّالة للرموز من خلال دمج التعلم المقارن على مستوى الرموز في عملية فك التشفير الخاصة بترجمة لغة الإشارة. وبشكل محدد، تُعامل ConSLT كل رمز ومرادفه الناتج عن أقنعة إسقاط (dropout masks) مختلفة كأزواج إيجابية أثناء عملية فك التشفير، ثم تُختار عشوائيًا KKK رموز من قاموس الكلمات غير الموجودة في الجملة الحالية لتكوين أمثلة سلبية. أجرينا تجارب شاملة على معيارين (PHOENIX14T وCSL-Daily) في بيئتي الترجمة النهائية (end-to-end) والمتسلسلة (cascaded). أظهرت النتائج التجريبية أن ConSLT تستطيع تحقيق جودة ترجمة أفضل مقارنة بالأساليب القوية السابقة.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
إطار تناقضي على مستوى الرموز لترجمة لغة الإشارة | مستندات | HyperAI