11 天前

快速双层神经合成单张图像真实感头像Avatar

Egor Zakharov, Aleksei Ivakhnenko, Aliaksandra Shysheya, Victor Lempitsky
快速双层神经合成单张图像真实感头像Avatar
摘要

我们提出了一种基于神经渲染的系统,仅需单张照片即可生成人物头部虚拟形象。该方法通过将人物外观分解为两个层次进行建模:第一层为依赖姿态的粗略图像,由一个小型神经网络合成;第二层为与姿态无关的纹理图像,用于刻画高频细节。该纹理图像在离线阶段生成,经姿态相关的几何形变处理后叠加至粗略图像之上,从而确保合成头部视角具有较高的有效分辨率。我们在视觉质量与运行速度两个方面将本系统与现有最先进方法进行了对比。实验结果表明,在保持相同视觉质量的前提下,本方法相较以往的神经头部虚拟形象模型实现了显著的推理速度提升。此外,我们还实现了该系统在实时智能手机平台上的部署,验证了其在实际应用中的可行性与高效性。

快速双层神经合成单张图像真实感头像Avatar | 最新论文 | HyperAI超神经