آلة وضعيات متعددة الأشخاص في مرحلة واحدة

التقدير متعدد الأشخاص للوضعية هو مشكلة صعبة. تركز الأساليب الحالية في الغالب على نهج من مرحلتين--مرحلة لتقديم الاقتراحات ومرحلة لتخصيص الوضعيات للأفراد المعنيين. ومع ذلك، تعاني هذه الأساليب ذات المرحلتين عموماً من كفاءة منخفضة. في هذا العمل، نقدم أول نموذج بمرحلة واحدة، آلة الوضعية متعددة الأشخاص بمرحلة واحدة (SPM)، لتبسيط خط الأنابيب وزيادة الكفاءة في تقدير وضعية متعددة الأشخاص. لتحقيق هذا الهدف، نقترح تمثيلًا جديدًا للوضعية المنظمة (SPR) يوحّد تمثيلات مثيل الشخص ومواقع المفاصل الجسدية. بناءً على SPR، قمنا بتطوير نموذج SPM الذي يمكنه التنبؤ مباشرة بالوضعيات المنظمة لمجموعة من الأشخاص في مرحلة واحدة، مما يقدم خط أنابيب أكثر كثافة وميزة كفاءة جاذبة مقارنة بالأساليب ذات المرحلتين. بشكل خاص، يُدخل SPR مفاصل الجذر لتمييز مثيلات الأشخاص المختلفة ومواقع مفاصل الجسم البشري يتم ترميزها إلى تحركاتها بالنسبة للجذور. لتحسين التوقعات للتحركات البعيدة لبعض المفاصل، يتم توسيع SPR إلى تمثيلات هرمية. بناءً على SPR، يمكن لأداة SPM أن تقوم بكفاءة بتقدير وضعيات متعددة الأشخاص عن طريق التنبؤ المتزامن بمفاصل الجذر (مواقع المثيلات) والتحركات المفصلية للجسم عبر شبكات CNNs. علاوة على ذلك، لإظهار عمومية SPM، قمنا أيضًا بتطبيقها على تقدير وضعيات 3D متعددة الأشخاص. أظهرت التجارب الشاملة على مقاييس MPII والمقياس الموسع PASCAL-Person-Part وMSCOCO وCMU Panoptic بوضوح الكفاءة الرائدة لـ SPM في تقدير وضعيات 2D/3D متعددة الأشخاص مع دقة استثنائية.