Music2Dance: DanceNet لتكوين الرقص المستند إلى الموسيقى

تُعد عملية توليد حركات إنسانية من الموسيقى، أي تحويل الموسيقى إلى رقص، موضوعًا جذابًا وقد لاقت اهتمامًا كبيرًا من قبل الباحثين في السنوات الأخيرة. وتعتبر هذه المهمة تحديًا كبيرًا ليس فقط بسبب الحاجة إلى حركات إنسانية واقعية ومعقدة تمثل الرقص، ولكن أيضًا لأن الحركات المولدة يجب أن تكون متناسقة مع نمط الموسيقى ووتيرتها وملفها الموسيقي. في هذا البحث، نقترح نموذجًا توليدياً تلقائيًا جديدًا يُسمى DanceNet، يُستخدم فيه نمط الموسيقى ووتيرتها وملفها كإشارات تحكم لتوليد حركات رقص ثلاثية الأبعاد بواقعية عالية وتنوع كبير. ولتحسين أداء النموذج المقترح، قمنا بتسجيل عدد من أزواج الموسيقى والرقص المتماشية من قبل راقصين محترفين، وتم بناء مجموعة بيانات عالية الجودة تتكون من أزواج موسيقى-رقص. وأظهرت التجارب أن الطريقة المقترحة تحقق نتائج متقدمة على مستوى الحالة الحالية (state-of-the-art).