2 个月前

IDE-3D:用于高分辨率3D感知肖像合成的交互式解耦编辑

Sun, Jingxiang ; Wang, Xuan ; Shi, Yichun ; Wang, Lizhen ; Wang, Jue ; Liu, Yebin
IDE-3D:用于高分辨率3D感知肖像合成的交互式解耦编辑
摘要

现有的3D感知面部生成方法在质量和可编辑性之间面临一个两难选择:要么生成低分辨率但可编辑的结果,要么生成高质量但无法编辑的结果。在这项工作中,我们提出了一种新的方法,将这两者的优势结合在一起。我们的系统由三个主要组件构成:(1)一种3D语义感知生成模型,该模型能够生成视角一致且解耦的面部图像和语义掩码;(2)一种混合GAN反演方法,该方法从语义和纹理编码器初始化潜在代码,并进一步优化以实现忠实重建;(3)一种规范编辑器,能够在规范视图中高效地操作语义掩码,并产生高质量的编辑结果。我们的方法适用于多种应用,例如自由视角面部绘制、编辑和风格控制。定量和定性结果均表明,我们的方法在照片真实感、忠实度和效率方面达到了当前的最先进水平。

IDE-3D:用于高分辨率3D感知肖像合成的交互式解耦编辑 | 最新论文 | HyperAI超神经