النظر إلى الجسم: التحليل الآلي للحركات البدنية والمعدلات الذاتية في الضائقة النفسية

الضائقة النفسية هي مشكلة مهمة ومتنامية في المجتمع. الكشف التلقائي وتقييم وتحليل هذه الضائقة هو مجال بحث نشط. مقارنة بالوسائط مثل الوجه والرأس والصوت، فإن الأبحاث التي تدرس استخدام الوسيلة الجسدية لهذه المهام نادرة النطاق نسبيًا. هذا يعود جزئيًا إلى قلة البيانات المتاحة وصعوبة استخراج الخصائص الجسدية المفيدة تلقائيًا. التقدم الحديث في تقدير الوضعية (Pose Estimation) والتعلم العميق قد مكّن من أساليب جديدة لهذا المجال والوسيلة. لتمكين هذا البحث، قمنا بجمع وتحليل مجموعة بيانات جديدة تحتوي على مقاطع فيديو للجسم بأكمله لمقابلات قصيرة وأسماء الضائقة الذاتية المبلغ عنها. نقترح طريقة جديدة لاكتشاف المتكيفات الذاتية (Self-adaptors) والتصرف العصبي (Fidgeting)، وهي مجموعة فرعية من المتكيفات الذاتية التي أثبتت أنها مرتبطة بالضائقة النفسية. نقوم بإجراء تحليل للحركات الجسدية الإحصائية والميزات التصرف العصبیة لاستكشاف كيف تؤثر مستويات الضائقة على سلوكيات المشاركین. ثم نقترح نهجًا متعدد الوسائط يجمع بين تمثيلات مختلفة للميزات باستخدام مُرمِّمات التعمق المتعددة الوسائط (Multi-modal Deep Denoising Auto-Encoders) وترميز فيشر المحسن (Improved Fisher Vector Encoding). نوضح أن النموذج المقترح لدينا، الذي يجمع بين الميزات السمعية-بصرية مع المؤشرات السلوكية للتصرف العصبي المستخرجة تلقائيًا، يمكنه التنبؤ بنجاح بمستويات الضائقة في مجموعة بيانات مصنفة بمستويات القلق والاكتئاب الذاتية المبلغ عنها.