وحدة التمديد الزمني للتعرف على الإجراءات القائمة على الهيكل العظمي

نقدم وحدة تمتد بها الرسم البياني الزمني لشبكة التوليف الرسومي (GCN) لتمييز الأفعال باستخدام تسلسلات الهياكل العظمية. تسعى الطرق الحالية إلى تمثيل رسم بياني فضائي أكثر ملاءمة ضمن الإطار الواحد، لكنها تتجاهل تحسين الرسم البياني الزمني بين الإطارات المختلفة. وبشكل محدد، تربط هذه الطرق بين الرؤوس التي تتوافق فقط مع نفس المفصل بين الإطارات المختلفة. في هذا العمل، نركّز على إضافة روابط إلى رؤوس متعددة مجاورة بين الإطارات المختلفة، واستخلاص ميزات إضافية استنادًا إلى الرسم البياني الزمني الموسّع. تُعدّ هذه الوحدة طريقة بسيطة ولكنها فعّالة لاستخراج الميزات المرتبطة بعديد المفاصل في حركة الإنسان. علاوةً على ذلك، تسهم وحدتنا في تحسين الأداء بشكل إضافي، بالتزامن مع الطرق الأخرى التي تحسّن فقط الرسم البياني الفضائي. قمنا بإجراء تجارب واسعة على مجموعتي بيانات كبيرتين، هما NTU RGB+D وKinetics-Skeleton، وبيّنا أن وحدتنا فعّالة مع عدة نماذج موجودة، وأن النموذج النهائي لدينا يحقق أداءً يُعدّ من أفضل الأداء في مجاله.