HyperAIHyperAI

Command Palette

Search for a command to run...

ثوندر: إعادة بناء الإنسان ثلاثي الأبعاد القائمة على المحولات مع العلامات

Mihai Zanfir Andrei Zanfir Eduard Gabriel Bazavan William T. Freeman Rahul Sukthankar Cristian Sminchisescu

الملخص

نقدّم نموذج THUNDR، وهو منهجية قائمة على نموذج الترانسفورمر (Transformer) للشبكة العصبية العميقة، تُستخدم لإعادة بناء الوضعية والشكل الثلاثي الأبعاد للأشخاص، بالاعتماد على صور RGB ذات منظور واحد. وتمثّل النقطة الأساسية في منهجيتنا تمثيلًا مُشَكَّلًا ثلاثي الأبعاد مُتوسّطًا باستخدام علامات ثلاثية الأبعاد، حيث نهدف إلى دمج القوة التنبؤية للهياكل التي لا تعتمد على النموذج (model-free-output architectures) مع الخصائص الترويضية والحفاظ على الخصائص الأنسانية (anthropometrically-preserving) المُتَّسمة بنموذج سطح بشري إحصائي مثل GHUM — وهو نموذج ثلاثي الأبعاد شامل للجسم البشري، مُعبّر، وقد تم تدريبه بشكل متكامل (end-to-end) حديثًا. ويُتيح لنا النموذج الجديد القائم على الترانسفورمر القدرة على التركيز على مناطق الصورة ذات الصلة بالمهام، ويدعم السياقات ذات التعلم الذاتي (self-supervised regimes)، ويضمن أن تكون الحلول متسقة مع الخصائص الأنسانية. ونُظهر نتائج متفوقة على مستوى الحالة الحالية (state-of-the-art) على مجموعتي بيانات Human3.6M و3DPW، سواء في النماذج ذات التدريب الكامل (fully-supervised) أو النماذج ذات التدريب الذاتي، في مهام استنتاج الشكل البشري ثلاثي الأبعاد، ومواقع المفاصل، والتحول العالمي. علاوةً على ذلك، لاحظنا أداءً قويًا جدًا في إعادة البناء ثلاثي الأبعاد حتى في حالات الأوضاع البشرية الصعبة التي تم جمعها في البيئة الطبيعية (in the wild).


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
ثوندر: إعادة بناء الإنسان ثلاثي الأبعاد القائمة على المحولات مع العلامات | مستندات | HyperAI