مامبا توك: التركيب الحركي الشامل الكفء باستخدام نماذج الفضاء الحالة الانتقائية

التركيب الحركي هو مجال حيوي في تفاعل الإنسان مع الكمبيوتر، له تطبيقات واسعة النطاق في مجالات متنوعة مثل السينما والروبوتات والواقع الافتراضي. وقد استخدمت التطورات الحديثة نموذج الانتشار (diffusion model) وآليات الانتباه (attention mechanisms) لتحسين التركيب الحركي. ومع ذلك، بسبب التعقيد الحسابي العالي لهذه التقنيات، لا يزال إنتاج سلاسل طويلة ومتنوعة بتأخير منخفض تحديًا. نستكشف إمكانية استخدام نماذج الفضاء الحالة (state space models - SSMs) للتعامل مع هذا التحدي، حيث نقوم بتنفيذ استراتيجية نمذجة ذات مرحلتين باستخدام أولويات حركية متقطعة لتعزيز جودة الحركات. ومن خلال الاستفادة من الكتلة الأساسية Mamba، نقدم MambaTalk، مما يعزز تنوع الحركات وإيقاعها من خلال دمج متعدد الوسائط. وقد أظهرت التجارب الشاملة أن طريقة عملنا تتطابق أو تتفوق على أداء النماذج الرائدة في المجال.