مجموعة بيانات كلامية للغة الكتشوا كولايо للاعتراف التلقائي بالمشاعر بعدد أبعاد

تمثّل إعادة التعرف التلقائي على المشاعر الصوتية موضوع بحثي مهم في مجال التفاعل البشري-الحاسوبي والحوسبة العاطفية. يتحدث أكثر من عشرة ملايين شخص لغة الكتشوا في جميع أنحاء أمريكا الجنوبية، ومن أبرز أشكالها المُعْرَفَة لغة الكتشوا كولايو. ومع ذلك، يمكن اعتبار هذه اللغة مُعدومة الموارد بالنسبة للتعرف الآلي على المشاعر، مما يشكل عائقًا أمام الناطقين بها الراغبين في استخدام هذه التقنية. ولذلك، يكمن إسهام هذا العمل في إنشاء مجموعة بيانات صوتية مكوّنة من 15 ساعة من لغة الكتشوا كولايو، والتي تم إتاحتها بشكل علني للمجتمع البحثي. وقد تم إنشاء هذه المجموعة من مجموعة كلمات وجمل تم جمعها صراحةً لهذا الغرض، وتم تصنيفها إلى تسع مشاعر فئوية: سعيد، حزين، مُملٌّ، خائف، نعاس، هادئ، متحمس، غاضب، ومحايد. وتمت عملية التسمية على مقياس منفصل مكوّن من 5 قيم، وفقًا لثلاثة أبعاد: القيمة (Valence)، والتحفيز (Arousal)، والهيمنة (Dominance). ولإثبات فائدة هذه المجموعة، قمنا بتنفيذ تجربة لاستخدام أساليب التعلم الآلي والشبكات العصبية في إعادة التعرف على المشاعر الصوتية.