2 个月前
SADRNet:用于鲁棒3D密集人脸对齐和重建的自对齐双面回归网络
Zeyu Ruan; Changqing Zou; Longhai Wu; Gangshan Wu; Limin Wang

摘要
三维人脸密集对齐与重建在野外环境中是一项具有挑战性的任务,因为遮挡和大姿态人脸图像中通常会缺失部分面部信息。头部姿态的大范围变化也增加了解空间的复杂度,使得建模更加困难。我们的核心思想是通过建模遮挡和姿态,将这一复杂的任务分解为几个相对更容易管理的子任务。为此,我们提出了一种端到端框架,称为自对齐双脸回归网络(Self-aligned Dual face Regression Network, SADRNet),该网络可以预测依赖于姿态的人脸和独立于姿态的人脸。这两种人脸通过一种考虑遮挡的自对齐方法结合,生成最终的三维人脸。在两个流行的基准数据集AFLW2000-3D和Florence上进行的大量实验表明,所提出的方法在性能上显著优于现有的最先进方法。