HyperAIHyperAI

Command Palette

Search for a command to run...

DeepFuse: شبكة تُراعي وحدة القياس التفاعلي (IMU) لتقدير موضع الإنسان ثلاثي الأبعاد في الزمن الفعلي من صور متعددة الزوايا

Fuyang Huang Ailing Zeng Minhao Liu Qiuxia Lai Qiang Xu

الملخص

في هذه الورقة، نقترح شبكة ثلاثية الأبعاد ذات مرحلتين تُسمى \textbf{DeepFuse}، لتقدير وضعية الإنسان في الفضاء ثلاثي الأبعاد من خلال دمج بيانات وحدات القياس التسارعية المحمولة على الجسم (IMU) والصور متعددة الزوايا بشكل عميق. تتكون المرحلة الأولى من شبكة تُصمم لتقدير الوضعية بالاعتماد فقط على الرؤية. وللحفاظ على الطبيعة الأساسية للبيانات الواردة من الصور متعددة الزوايا، تستخدم المرحلة البصرية التمثيل ثلاثي الأبعاد متعدد القنوات كشكل تمثيلي للبيانات، وتُطبّق طبقة نشاط من نوع 3D soft-argmax. أما المرحلة الثانية فهي مرحلة تحسين البيانات باستخدام IMU، والتي تُدخل طبقة تُسمى "طبقة العظم-IMU" لدمج بيانات IMU والبيانات البصرية في مرحلة مبكرة على مستوى البيانات. وبفضل هذه البنية، يمكننا تحقيق خطأ متوسط في المفاصل قدره 28.928.928.9 مم على مجموعة بيانات TotalCapture و13.413.413.4 مم على مجموعة بيانات Human3.6M وفقًا للبروتوكول 1، محقِّقين تحسنًا كبيرًا مقارنةً بأفضل النتائج السابقة (SOTA). وأخيرًا، نناقش تجريبيًا فعالية الشبكة ثلاثية الأبعاد الكاملة في تقدير الوضعية ثلاثية الأبعاد، مما قد يُسهم في توجيه الأبحاث المستقبلية.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
DeepFuse: شبكة تُراعي وحدة القياس التفاعلي (IMU) لتقدير موضع الإنسان ثلاثي الأبعاد في الزمن الفعلي من صور متعددة الزوايا | مستندات | HyperAI