HyperAIHyperAI

Command Palette

Search for a command to run...

Évaluation hiérarchique de la prononciation avec attention multi-aspect

Heejin Do Yunsu Kim Gary Geunbae Lee

Résumé

L'évaluation automatique de la prononciation est un élément clé d'un système de formation à la prononciation assistée par ordinateur. Pour fournir des retours détaillés, il est essentiel d'évaluer la prononciation à différents niveaux de granularité, tels que le phonème, le mot et l'unité discursive, en prenant en compte divers aspects comme la précision, la fluidité et l'exhaustivité. Cependant, les méthodes existantes multi-aspects et multi-niveaux de granularité prévoient simultanément tous les aspects à tous les niveaux de granularité ; elles ont donc du mal à capturer la hiérarchie linguistique entre phonèmes, mots et unités discursives. Cette limitation entraîne également une négligence des relations intimes entre les aspects au sein de la même unité linguistique. Dans cet article, nous proposons un modèle d'Évaluation Hiérarchique de la Prononciation avec Attention Multi-aspect (HiPAMA), qui représente hiérarchiquement les niveaux de granularité pour capturer directement leurs structures linguistiques et introduit une attention multi-aspect qui reflète les associations entre les aspects au même niveau afin de créer des représentations plus évocatrices. En obtenant des informations relationnelles tant du côté granulaire que du côté aspectuel, HiPAMA peut pleinement tirer parti de l'apprentissage multitâche. Les résultats expérimentaux remarquables sur les ensembles de données Speechocean762 démontrent la robustesse de HiPAMA, notamment dans les aspects difficiles à évaluer.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp