تقدير وضعية الإنسان في الفضاء والزمن باستخدام شبكات الاعصاب ثلاثية الأبعاد (3D CNN)

يستكشف هذا البحث قدرات الشبكات العصبية التلافيفية في التعامل مع مهمة يمكن إدارتها بسهولة من قبل البشر: استشعار وضع الجسم البشري ثلاثي الأبعاد من زوايا مختلفة. ومع ذلك، في نهجنا، نحن مقيدون باستخدام نظام رؤية أحادي العين. لهذا الغرض، نطبق نهج الشبكات العصبية التلافيفية على مقاطع الفيديو RGB ونوسّعه إلى التلافيف ثلاثية الأبعاد. يتم هذا عن طريق ترميز البعد الزمني في مقاطع الفيديو كالبعد الثالث في الفضاء التلوفي، والانحدار المباشر إلى موضع المفاصل البشرية في الفضاء الإحداثي ثلاثي الأبعاد. يظهر هذا البحث قدرة مثل هذه الشبكة على تحقيق أداء متميز على مجموعة البيانات المختارة Human3.6M (هومان 3.6 إم)، مما يثبت إمكانية تمثيل البيانات الزمنية بنجاح بإضافة بعد إضافي في العملية التلافيفية.