إعادة بناء الوجه ثلاثي الأبعاد والمحاذاة الكثيفة باستخدام شبكة الانحدار الخريطة الموضعية

نقترح طريقة مباشرة تعيد بناء هيكل الوجه ثلاثي الأبعاد وتوفّر مطابقة كثيفة في الوقت نفسه. لتحقيق هذا، نصمّم تمثيلًا ثنائي الأبعاد يُسمى خريطة الموضع UV التي تسجّل الشكل ثلاثي الأبعاد للوجه الكامل في الفضاء UV، ثم ندرب شبكة عصبية تقنية بسيطة على استنتاجه من صورة ثنائية الأبعاد واحدة. كما ندمج قناع وزني في دالة الخسارة أثناء التدريب لتحسين أداء الشبكة. طرقنا لا تعتمد على أي نموذج وجه سابق، ويمكنها إعادة بناء الهندسة الكاملة للوجه مع المعنى الدلالي. وفي الوقت نفسه، فإن شبكتنا خفيفة الوزن جدًا وتحتاج إلى 9.8 ميلي ثانية فقط لمعالجة الصورة، وهو ما يعد أسرع بكثير من الأعمال السابقة. تظهر التجارب على عدة مجموعات بيانات صعبة أن طرقنا تتفوّق بشكل كبير على الأساليب الرائدة الأخرى في كل من مهمتي الإعادة والتوافق.