HifiFace: استبدال الوجه عالي الوضوح الموجه بالشكل ثلاثي الأبعاد والمعطيات الدلالية

في هذه الدراسة، نقترح طريقة عالية الدقة لاستبدال الوجوه تُسمى HifiFace، التي تمكّن من الحفاظ بشكل جيد على شكل الوجه المُستَبدَل مع إنتاج نتائج واقعية بصريًا. على عكس الطرق الحالية لاستبدال الوجوه التي تعتمد فقط على نموذج التعرف على الوجه للحفاظ على تشابه الهوية، نقترح استخدام مفهوم "هوية واعية بالشكل ثلاثي الأبعاد" للتحكم في شكل الوجه من خلال إشراف هندسي مستمد من نموذج 3DMM وطريقة استعادة الوجه ثلاثي الأبعاد. وفي الوقت نفسه، نقدّم وحدة الدمج الوجهي الدلالي (Semantic Facial Fusion) لتحسين دمج ميزات المشفر (encoder) والفك (decoder) وتمكين مزج تكيفي، مما يجعل النتائج أكثر واقعية بصريًا. أظهرت التجارب الواسعة على الوجوه في البيئات الطبيعية أن طريقة我们的 يمكنها الحفاظ على الهوية بشكل أفضل، وبخاصة من حيث شكل الوجه، وتحقيق نتائج واقعية بصريًا أكثر من الطرق المتطورة السابقة.