HuManiFlow: جريان التطبيع المشروط بالأسلاف على منايف SO(3) لتقدير توزيع الوضع والشكل البشري

تقدير الوضع والشكل البشري ثلاثي الأبعاد من خلال الكاميرا أحادية العدسة هو مشكلة غير محددة بشكل جيد، حيث يمكن أن تفسر صورة ثنائية الأبعاد لشخص عدة حلول ثلاثية أبعاد. وفقًا للأساليب الحديثة، يتم التنبؤ بتوزيع احتمالي على معلمات الوضع والشكل الثلاثية الأبعاد المحتملة المشروطة بالصورة. نوضح أن هذه الأساليب تظهر توازنًا بين ثلاثة خصائص رئيسية: (i) الدقة - احتمالية الحل الحقيقي ثلاثي الأبعاد تحت التوزيع المتوقع، (ii) التناسق بين العينة والمدخل - مدى توافق العينات ثلاثية الأبعاد من التوزيع المتوقع مع الأدلة المرئية في الصورة ثنائية الأبعاد، و (iii) تنوع العينات - نطاق الحلول الثلاثية الأبعاد المحتملة التي يمثلها التوزيع المتوقع. طريقتنا، المعروفة باسم HuManiFlow، تتوقع توزيعات دقيقة ومتناقة ومتنوعة في آن واحد. نستخدم شجرة الحركة البشرية لتفكيك وضع الجسم الكامل إلى توزيعات وضع لكل جزء من أجزاء الجسم بطريقة ذاتية الانحدار، مشروطة بالأجداد. يتم تنفيذ توزيعات كل جزء من أجزاء الجسم باستخدام جريان التطبيع الذي يحترم هيكل المنيفولد لـ SO(3)، وهو مجموعة لي للوضعيات لكل جزء من أجزاء الجسم. نوضح أن الخسائر النقطية الثلاثية الأبعاد غير المحددة بشكل جيد ولكن الشائعة تقلل من تنوع العينات، ولذلك نعتمد فقط على الخسائر التدريب الاحتمالية. الرمز البرمجي متاح على الرابط التالي:https://github.com/akashsengupta1997/HuManiFlow.