بناء الرسوم البيانية الديناميكية لتمييز الإيماءات اليدوية من خلال الانتباه المكاني-الزماني

نقترح طريقة انتباه مكاني-زماني تعتمد على الرسم البياني الديناميكي (DG-STA) لتمييز حركات اليد. الفكرة الأساسية هي بناء رسم بياني متصل بالكامل من هيكل اليد، حيث يتم تعلم خصائص العقد والحواف تلقائيًا عبر آلية انتباه ذاتي تعمل في المجالين المكاني والزماني. نقترح أيضًا الاستفادة من المؤشرات المكانية-الزمانية لمواقع المفاصل لضمان تمييز قوي في ظروف صعبة. بالإضافة إلى ذلك، يتم تطبيق قناع مكاني-زماني جديد يقلل بشكل كبير من التكلفة الحسابية بنسبة 99٪. نقوم بإجراء تجارب واسعة النطاق على مقاييس الأداء (DHG-14/28 و SHREC'17) ونثبت الأداء المتفوق لطرقنا مقارنة بالطرق الأكثر تقدمًا حاليًا. يمكن العثور على الكود المصدر في https://github.com/yuxiaochen1103/DG-STA.