التحدي الأول لتوفيق الوجه ثلاثي الأبعاد في البيئة الحقيقية (3DFAW) باستخدام الانحدار الخريطي للجزء التوافقي ثنائي المراحل

يصف هذا البحث مشاركتنا في تحدي تحديد الوجه ثلاثي الأبعاد في البيئة الحقيقية (3DFAW) الأول. يعتمد أسلوبنا على فكرة الانحدار الخريطة الحرارية للجزء التوافقي [1]، مع توسيعها لتحديد الوجه ثلاثي الأبعاد. يقوم أسلوبنا بتفكيك المشكلة إلى جزأين: (أ) تقدير الإحداثيات X,Y (ثنائية الأبعاد) و(ب) تقدير الإحداثي Z (العمق). في المرحلة الأولى، يقدر أسلوبنا إحداثيات X,Y للنقاط المميزة للوجه بإنتاج مجموعة من الخرائط الحرارية ثنائية الأبعاد، واحدة لكل نقطة مميزة، باستخدام الانحدار الخريطة الحرارية للجزء التوافقي. ثم، يتم استخدام هذه الخرائط الحرارية بالإضافة إلى الصورة المدخلة RGB كمدخلات لشبكة فرعية عميقة جداً تم تدريبها عبر التعلم المتبقي لتقدير الإحداثي Z. حاز أسلوبنا على المركز الأول في تحدي 3DFAW، متخطياً أفضل نتيجة ثانية بنسبة تزيد عن 22%.