Cadre OCEAN-AI avec l'approche d'attention croisée hémiface EmoFormer pour l'évaluation des traits de personnalité

Des études psychologiques et neurologiques antérieures avaient suggéré qu’un type de personnalité pouvait être déterminé à la fois par l’ensemble du visage et par ses deux hémivisages. Cet article présente une recherche novatrice fondée sur des réseaux neuronaux profonds, qui exploite les caractéristiques des deux hémivisages afin d’évaluer les cinq traits majeurs de la personnalité humaine (Big Five Personality Traits, PT). À cette fin, nous avons développé une approche en temps réel, nommée EmoFormer, reposant sur une attention croisée entre hémivisages. La nouveauté de cette méthode réside dans la confirmation que chaque hémivisage présente une forte capacité prédictive pour la distinction des traits de personnalité humaine. Notre approche repose sur un extracteur de caractéristiques émotionnelles de niveau intermédiaire spécifiquement conçu pour chaque hémivisage, ainsi qu’une stratégie d’agrégation des caractéristiques par attention croisée entre hémivisages. La fusion combinée des deux hémivisages a surpassé l’utilisation de l’ensemble du visage, avec une amélioration relative de 3,6 % en termes de coefficient de corrélation de concordance (0,634 contre 0,612) sur le corpus ChaLearn First Impressions V2. La méthode proposée dépasse également toutes les approches actuelles de pointe pour l’évaluation des traits de personnalité basées sur la modalité visage. Nous avons également analysé l’« hémivisage optimal », celui qui prédit le mieux les traits de personnalité en fonction des caractéristiques démographiques (sexe, ethnie, âge). Nos résultats montrent que l’hémivisage optimal pour deux des cinq traits (Ouverture à l’expérience et Non-Neuroticisme) varie selon les caractéristiques démographiques. Pour les trois autres traits, l’hémivisage droit domine pour l’Extraversion, tandis que l’hémivisage gauche est plus indicatif de la Conscientiosité et de l’Agréabilité. Ces observations confortent les recherches psychologiques et neurologiques antérieures. En outre, nous proposons un cadre open-source, désigné OCEAN-AI, qui peut être intégré de manière transparente dans des systèmes experts, offrant des applications pratiques dans divers domaines tels que la santé, l’éducation et les ressources humaines.