HyperAIHyperAI

Command Palette

Search for a command to run...

Reconstruction 3D de visage auto-supervisée par estimation conditionnelle

Yandong Wen Weiyang Liu Bhiksha Raj Rita Singh

Résumé

Nous présentons un cadre d’estimation conditionnelle (CEST) permettant d’apprendre des paramètres faciaux 3D à partir d’images 2D en vue unique, via une formation auto-supervisée à partir de vidéos. CEST repose sur le principe de l’analyse par synthèse, dans lequel les paramètres faciaux 3D (forme, réflectance, point de vue et éclairage) sont estimés à partir d’une image faciale, puis réassemblés pour reconstruire l’image faciale 2D. Afin d’apprendre des paramètres 3D sémantiquement significatifs sans accès explicite à leurs étiquettes, CEST couple l’estimation des différents paramètres 3D en tenant compte de leurs dépendances statistiques. Plus précisément, l’estimation de tout paramètre 3D n’est pas seulement conditionnée à l’image donnée, mais aussi aux paramètres faciaux déjà estimés. En outre, la symétrie de la réflectance et la cohérence entre les cadres vidéo sont exploitées pour améliorer le découplage des paramètres faciaux. Associé à une nouvelle stratégie d’intégration de la symétrie et de la cohérence de la réflectance, CEST peut être efficacement entraîné à partir de vidéos capturées dans des conditions réelles (in-the-wild). Des expériences qualitatives et quantitatives démontrent l’efficacité de CEST.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Reconstruction 3D de visage auto-supervisée par estimation conditionnelle | Articles | HyperAI