HyperAIHyperAI

Command Palette

Search for a command to run...

FullSubNet+ : FullSubNet à atténuation par canal avec spectrogrammes complexes pour l’amélioration de la parole

Jun Chen Zilin Wang Deyi Tuo Zhiyong Wu Shiyin Kang Helen Meng

Résumé

Le modèle FullSubNet précédemment proposé a obtenu des performances remarquables au défi de suppression de bruit profond (DNS) et a suscité un grand intérêt. Toutefois, il reste sujet à des problèmes tels qu’un désalignement entre entrée et sortie, ainsi qu’un traitement trop grossier des bandes de fréquence. Dans ce travail, nous proposons un cadre étendu pour l’amélioration en temps réel du signal vocal mono-canal, appelé FullSubNet+, intégrant plusieurs améliorations significatives. Premièrement, nous avons conçu un module léger à attention canal sensible au temps à plusieurs échelles (MulCA), qui combine convolution à plusieurs échelles et mécanisme d’attention sur les canaux afin d’aider le réseau à se concentrer sur les bandes de fréquence les plus discriminantes pour la suppression du bruit. Ensuite, afin d’exploiter pleinement les informations de phase présentes dans le signal bruité, notre modèle prend en entrée l’ensemble des spectrogrammes de module, partie réelle et partie imaginaire. En outre, en remplaçant les couches de mémoire à long terme et court terme (LSTM) du modèle original sur toute la bande par des blocs empilés de réseaux de convolution temporelle (TCN), nous avons conçu un module plus efficace sur toute la bande, appelé extracteur de bande complète. Les résultats expérimentaux sur le jeu de données du défi DNS démontrent la performance supérieure de notre FullSubNet+, qui atteint un état de l’art (SOTA) et surpasser les approches existantes d’amélioration du signal vocal.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp