gSDF: الوظائف المسافات الموقعة المحركة بالهندسة لاستعادة اليد والكائن ثلاثي الأبعاد

الدوال المسافات الموقعة (SDFs) هي إطار جذاب أظهر مؤخرًا نتائج واعدة في إعادة بناء الأشكال ثلاثية الأبعاد من الصور. تعمم الدوال المسافات الموقعة بسلاسة على دقة أشكال مختلفة وتوبولوجيات، ولكنها تفتقر إلى نمذجة صريحة للهندسة ثلاثية الأبعاد الكامنة. في هذا العمل، نستغل بنية اليد واستخدمها كإرشاد لإعادة بناء الشكل باستخدام الدوال المسافات الموقعة. بشكل خاص، نعالج إعادة بناء اليدين والأشياء التي يتم التلاعب بها من صور RGB أحادية العدسة. لهذا الغرض، نقدر وضعيات اليدين والأشياء واستخدمها لإرشاد إعادة البناء ثلاثي الأبعاد. وبشكل أكثر تحديدًا، نتنبأ بالسلاسل الحركية لتحويلات الوضعيات ونساهم في محاذاة الدوال المسافات الموقعة مع وضعيات اليدين ذات المفاصل المعقدة. نحسن الخصائص البصرية لنقاط ثلاثية الأبعاد من خلال محاذاة الهندسة ونستفيد أيضًا من المعلومات الزمنية لتعزيز متانة النموذج أمام الإخفاء والحركات الضبابية. قمنا بإجراء تجارب واسعة على مقاييس ObMan وDexYCB الصعبة وأظهرنا تحسينات كبيرة للطريقة المقترحة مقارنة بأحدث التقنيات في المجال.