هياكل صورية ثلاثية الأبعاد إعادة النظر: تقدير وضعية البشر المتعددة

نُعالج مشكلة تقدير الوضع الثلاثي الأبعاد (3D) لعدة أشخاص من منظورات متعددة. يُعد الانتقال من تقدير وضع شخص واحد إلى وضع عدة أشخاص، ومن الفضاء ثنائي الأبعاد إلى الفضاء الثلاثي الأبعاد، تحديًا كبيرًا نظرًا لتوسع الفضاء الحالة بشكل كبير، بالإضافة إلى الظلال (الإغلاق) والغموض بين المنظورات عند عدم معرفة هوية الأشخاص مسبقًا. ولحل هذه المشكلات، نبدأ بتحديد فضاء حالة مُختصر من خلال عملية التثليث (triangulation) للأزواج المقابلة من أجزاء الجسم التي تم استخلاصها باستخدام كاشفات الأجزاء لكل منظور كاميرات. ومن أجل التغلب على الغموض الناتج عن أجزاء خاطئة أو مختلطة لعدة أشخاص بعد التثليث، وكذلك الغموض الناتج عن الكشفات الخاطئة (false positives)، نقدّم نموذجًا ثلاثي الأبعاد يُعرف بـ "الهياكل الصورية الثلاثية الأبعاد" (3D Pictorial Structures - 3DPS). يعتمد نموذجنا على طاقات أحادية (unary potentials) متعددة المنظورات، بينما يتم دمج نموذج مسبق (prior model) في دوال الطاقات الثنائية (pairwise) والثلاثية (ternary). ولضمان توازن تأثير هذه الطاقات، يتم تعلّم معاملات النموذج باستخدام خوارزمية التدعم النموذجي المُهيكل (Structured SVM - SSVM). ويتميز النموذج بأنه عام ويمكن تطبيقه على كل من تقدير وضع شخص واحد ووضع عدة أشخاص. ولتقييم أداء النموذج في حالات تقدير وضع شخص واحد وعديد الأشخاص، نعتمد على أربع مجموعات بيانات مختلفة. نبدأ بتحليل مساهمة كل نوع من الطاقات، ثم نقارن نتائجنا بالعمل السابق، حيث نُظهر أداءً متفوقًا.