HifiFace：基于3D形状与语义先验的高保真人脸替换

在本工作中，我们提出了一种高保真度的人脸替换方法——HifiFace，该方法能够有效保留源人脸的面部轮廓，并生成高度逼真的图像结果。与现有方法仅依赖人脸识别模型以维持身份相似性不同，我们提出了基于3D形状感知的身份表征，通过3DMM（3D面模型）和3D人脸重建方法提供的几何监督，实现对人脸形状的精确控制。同时，我们引入了语义面部融合模块（Semantic Facial Fusion module），用于优化编码器与解码器特征的融合，并实现自适应的图像混合，从而显著提升结果的逼真度。在真实场景人脸数据上的大量实验表明，与现有最先进方法相比，我们的方法在保持身份一致性方面表现更优，尤其是在面部形状的保留上具有显著优势，同时生成的图像更具照片级真实感。