X-Avatar: أفاتار بشرية تعبر عن المشاعر
نقدم نموذج X-Avatar، وهو نموذج رمز بديل جديد يلتقط التعبير الكامل للبشر الرقميين لتقديم تجارب شبيهة بالحياة في التواجد عن بعد والواقع المعزز والواقع الافتراضي وغيرها. طريقتنا تُنمذِج الأجسام واليدين والتعبيرات الوجهية والمظهر بطريقة شاملة ويمكن تعلمها من مسح ثلاثي الأبعاد كامل أو بيانات RGB-D. لتحقيق هذا، نقترح وحدة تغليف أمامية قابلة للتعلم واعية بالأجزاء يمكن تشغيلها بواسطة فضاء المعلمات الخاص بـ SMPL-X، مما يسمح بإنشاء رسوم متحركة تعبر بشكل جيد لأفاتار X. لتعلم الحقول الشكلية والتشوهية العصبية بكفاءة، نقترح استراتيجيات عينية وتوصيفية جديدة واعية بالأجزاء. هذا يؤدي إلى نتائج أكثر دقة، خاصة للأجزاء الجسدية الصغيرة مع الحفاظ على التدريب الفعال رغم زيادة عدد العظام المتحركة. لالتقاط مظهر الأفاتار مع تفاصيل عالية التردد، نوسع الحقول الهندسية والتشوهية بشبكة نسيج مشروطة بالوضع والتعبير الوجهي والهندسة والأطراف الطبيعية للسطح المتشوه. نثبت تجريبيًا أن طريقتنا تتفوق على القواعد الأساسية القوية في كلا مجالات البيانات من حيث الكمية والنوعية في مهمة الرسوم المتحركة. لتسهيل البحث المستقبلي حول الأفاتار التعابيرية، نساهم بمجموعة بيانات جديدة تُسمى X-Humans تحتوي على 233 سلسلة من المسح النسيجي عالي الجودة لـ 20 مشاركًا، بإجمالي 35,500 إطار بيانات.