FFHQ-UV : Jeu de données normalisé de textures UV faciales pour la reconstruction 3D du visage

Nous présentons un grand ensemble de données de cartes UV de textures faciales, comprenant plus de 50 000 cartes UV de haute qualité, caractérisées par une éclairage uniforme, des expressions neutres et des régions faciales nettoyées — des attributs essentiels pour la génération de modèles 3D faciaux réalistes sous diverses conditions d’éclairage. Cet ensemble de données est extrait d’un grand ensemble de données d’images faciales, nommé FFHQ, grâce à notre pipeline entièrement automatique et robuste de production de cartes UV. Notre pipeline exploite les avancées récentes des méthodes d’édition d’images faciales basées sur StyleGAN pour générer des images normalisées multi-vues à partir d’entrées monoculaires. Une procédure soigneusement conçue d’extraction, de correction et de complétion des cartes UV est ensuite appliquée afin de produire des cartes UV de haute qualité à partir des images normalisées. Par rapport aux ensembles de données existantes de cartes UV, notre ensemble offre des cartes de textures plus diversifiées et de meilleure qualité. Nous avons également entraîné un décodeur de texture basé sur un GAN, servant de base non linéaire pour la reconstruction paramétrique de visages 3D. Les expériences montrent que notre méthode améliore la précision de reconstruction par rapport aux approches de pointe, et surtout, produit des cartes de textures de haute qualité prêtes à être utilisées pour des rendus réalistes. L’ensemble de données, le code source et le décodeur de texture pré-entraîné sont disponibles publiquement à l’adresse suivante : https://github.com/csbhr/FFHQ-UV.