HyperAIHyperAI

Command Palette

Search for a command to run...

Une encodage conjoint basé sur Transformer pour la reconnaissance d'émotions et l'analyse de sentiment

Jean-Benoit Delbrouck Noé Tits Mathilde Brousmiche Stéphane Dupont

Résumé

La compréhension du sentiment exprimé et des émotions constitue deux facteurs essentiels dans le langage multimodal humain. Ce papier présente une architecture basée sur les Transformers, appelée codage conjoint par Transformer (TBJE), dédiée à la reconnaissance des émotions et à l’analyse de sentiment. En plus d’utiliser l’architecture Transformer, notre approche repose sur une attention conjointe modulaire et une couche de « aperçu » (glimpse layer) afin de coder conjointement un ou plusieurs modalités. La solution proposée a également été soumise au ACL20 : Second Grand-Challenge sur le langage multimodal, afin d’être évaluée sur le jeu de données CMU-MOSEI. Le code permettant de reproduire les expériences présentées est mis à disposition sous licence open-source : https://github.com/jbdel/MOSEI_UMONS.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp