DSFFNet: شبكة دمج الميزات من الجانبين لنقل الوضع ثلاثي الأبعاد

لحل مشكلة تشوه الوضع في التحويل الأمامي لخصائص الوضع في الأساليب الحالية، تقترح هذه الورقة شبكة تجميع الخصائص من الجانبين المزدوجين لنقل الوضع (DSFFNet). أولاً، يتم استخراج رمز وضع ثابت الطول من الشبكة المصدر بواسطة مُشفِّر الوضع ويتم دمجه مع رؤوس الهدف لتشكيل خاصية مختلطة؛ ثانياً، تم تصميم وحدة تطبيع المثيل التكيفي لتجميع الخصائص (FFAdaIN)، والتي يمكنها معالجة خصائص الوضع والهوية بشكل متزامن، مما يسمح بتعويض خصائص الوضع طبقة بطبقة أثناء التحويل الأمامي، وبالتالي حل مشكلة تشوه الوضع؛ وأخيراً، باستخدام مُفكِّك الشبكة المكون من هذا الوحدة، يتم نقل وضعيات الجسم تدريجياً إلى الشبكة الهدف. تظهر نتائج التجارب على مجموعات البيانات SMPL وSMAL وFAUST وMultiGarment أن DSFFNet تنجح في حل مشكلة تشوه الوضع بينما تحتفظ بشبكة ذات هيكل أصغر مع قدرة أقوى على نقل الوضع وسرعة تقارب أسرع، ويمكنها التكيف مع شبكات ذات عدد مختلف من الرؤوس. يمكن الوصول إلى الكود عبر الرابط: https://github.com/YikiDragon/DSFFNet