HyperAIHyperAI
منذ 2 أشهر

بُكْفَا: أبجدية لغة الإشارة الروسية

Karina Kvanchiani; Petr Surovtsev; Alexander Nagaev; Elizaveta Petrova; Alexander Kapitanov
بُكْفَا: أبجدية لغة الإشارة الروسية
الملخص

يهدف هذا البحث إلى دراسة التعرف على أبجدية الإشارة الروسية، المعروفة أيضًا بأبجدية الإشارة الروسية (RSL) الداكتيل. الداكتيل هو مكون من لغات الإشارة حيث تمثل حركات اليد المميزة الحروف الفردية للغة المكتوبة. يتم استخدام هذه الطريقة لكتابة الكلمات التي لا توجد لها إشارات محددة، مثل الأسماء الخاصة والمصطلحات التقنية. يعتبر محاكِّم تعلم الأبجدية تطبيقًا أساسيًا للتعرف على الداكتيل المنعزل. هناك مشكلة بارزة في التعرف على الداكتيل المنعزل وهي نقص البيانات: يفتقر مجموعات البيانات الموجودة للأبجدية الروسية الداكتيلية إلى التنوع بين الأفراد، أو تحتوي على عينات غير كافية، أو تغطي فقط الإشارات الثابتة. نقدم "بُكْفَا" (Bukva)، أول مجموعة بيانات فيديو شاملة ومفتوحة المصدر للتعرف على الأبجدية الروسية الداكتيلية. تحتوي هذه المجموعة على 3,757 فيديو مع أكثر من 101 عينة لكل حرف من أحرف الأبجدية الروسية للإشارة، بما في ذلك الإشارات الديناميكية. استخدمنا منصات العمل الجماعي لزيادة تنوع الأفراد، مما أدى إلى مشاركة 155 خبيرًا من الصم وضعاف السمع في إنشاء المجموعة. استخدمنا وحدة تحويل الزمن (TSM) (Temporal Shift Module) للتعامل بكفاءة مع الإشارات الثابتة والديناميكية، مما حقق دقة تصنيف بلغت 83.6٪ مع استدلال في الوقت الحقيقي باستخدام المعالج فقط. إن مجموعة البيانات والكود التوضيحي والنماذج المدربة مسبقًا متاحة للعامة بشكل مجاني.

بُكْفَا: أبجدية لغة الإشارة الروسية | أحدث الأوراق البحثية | HyperAI