HyperAIHyperAI

Command Palette

Search for a command to run...

منذ 4 أشهر

إدراج الانتباه إلى الكلمات في التجزئة الأساسية بالحروف

{Shohei Higashiyama Masao Utiyama Yoshiaki Oida Yohei Sakamoto Masao Ideuchi Eiichiro Sumita Isaac Okada}

إدراج الانتباه إلى الكلمات في التجزئة الأساسية بالحروف

الملخص

تم تطبيق نماذج الشبكات العصبية بشكل نشط على تقسيم الكلمات، خاصة باللغة الصينية، نظرًا لقدرتها على تقليل الجهد المطلوب في هندسة الميزات. وتصنف النماذج النموذجية لتقسيم الكلمات إلى نوعين: نموذج مبني على الحروف، والذي يُستخدم لتحقيق استنتاج دقيق، ونموذج مبني على الكلمات، والذي يستفيد من المعلومات على مستوى الكلمة. ونُقدّم نموذجًا مبنيًا على الحروف يستخدم معلومات الكلمة بهدف الاستفادة من مزايا النوعين معًا. يتعلم نموذجنا أهمية عدة كلمات مرشحة لحرف معين بناءً على آلية الانتباه، ثم يستخدم هذه المعلومة في اتخاذ قرارات التقسيم. وأظهرت النتائج التجريبية أن نموذجنا يحقق أداءً أفضل من النماذج الرائدة في مجالها على مجموعتي بيانات معياريتي اليابانية والصينية.

المعايير القياسية

معيار قياسيالمنهجيةالمقاييس
japanese-word-segmentation-on-bccwjWord Attention
F1-score (Word): 0.9893

بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — عجّل تطوير الذكاء الاصطناعي الخاص بك من خلال البرمجة المشتركة المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة المشتركة بالذكاء الاصطناعي
وحدات معالجة رسومات جاهزة
أفضل الأسعار
ابدأ الآن

Hyper Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
إدراج الانتباه إلى الكلمات في التجزئة الأساسية بالحروف | الأوراق البحثية | HyperAI