Command Palette
Search for a command to run...
Reconnaissance des émotions par la parole avec apprentissage multi-tâches
{Kenneth Liang Church Renjie Huang Jiahong Zheng Xingyu Yuan Cai}
Résumé
La reconnaissance émotionnelle de la parole (SER) consiste à classer la parole dans des catégories émotionnelles telles que : Heureux, En colère, Triste et Neutre. Récemment, l'apprentissage profond a été appliqué à la tâche de SER. Ce papier propose un cadre d'apprentissage multi-tâches (MTL) permettant d'effectuer simultanément la reconnaissance parole- texte et la classification émotionnelle, à l'aide d'un modèle neuronal profond end-to-end basé sur wav2vec-2.0. Des expériences menées sur la base de benchmark IEMOCAP montrent que la méthode proposée atteint des performances de pointe pour la tâche de SER. En outre, une étude d'ablation confirme l'efficacité du cadre MTL proposé.
Benchmarks
| Benchmark | Méthodologie | Métriques |
|---|---|---|
| speech-emotion-recognition-on-iemocap | SER with MTL | F1: - UA CV: 0.7815 |
Construire l'IA avec l'IA
De l'idée au lancement — accélérez votre développement IA avec du co-codage IA gratuit, un environnement prêt à l'emploi et les meilleurs prix GPU.