1 个月前

基于弱监督学习的精确3D人脸重建:从单张图像到图像集

Yu Deng; Jiaolong Yang; Sicheng Xu; Dong Chen; Yunde Jia; Xin Tong
基于弱监督学习的精确3D人脸重建:从单张图像到图像集
摘要

近年来,基于深度学习的三维人脸重建方法在质量和效率方面均展现出令人鼓舞的结果。然而,训练深度神经网络通常需要大量数据,而带有真实三维人脸形状的图像却十分稀缺。本文提出了一种新颖的深度三维人脸重建方法,该方法具有以下两个特点:1)利用一种稳健的混合损失函数进行弱监督学习,该损失函数同时考虑了低级和感知级信息以提供监督;2)通过利用不同图像中的互补信息进行形状聚合,实现多图像人脸重建。我们的方法快速、准确且对遮挡和大姿态变化具有鲁棒性。我们在三个数据集上进行了全面的实验,系统地将我们的方法与十五种近期方法进行了比较,并展示了其处于国际领先水平的性能。