HyperAIHyperAI

Command Palette

Search for a command to run...

الدلالات الدقيقة للمعلومات الجانبية المرشدة لـ Dual-Prompts في التعرف على الحركات الهيكلية بدون تعلم مسبق

Yang Chen Jingcai Guo Tian He Ling Wang

الملخص

التعرف على الأفعال بدون معاينة مسبقة باستخدام الهيكل العظمي يهدف إلى التعرف على أفعال بشرية غير معروفة بناءً على الأولويات المُتعلمة للأفعال المعروفة المستندة إلى الهيكل العظمي وفضاء وصفي مشترك بين الفئات المعروفة وغير المعروفة. ومع ذلك، ركزت الدراسات السابقة على إنشاء جسور بين فضاء تمثيل الهيكل العظمي المعروف وفضاء الوصف الدلالي على المستوى الخشن، مما تجاهل التحالف الدقيق لهذه المساحات، مما أدى إلى أداء غير مثالي في تمييز فئات الأفعال ذات الشبه الكبير. لمعالجة هذه التحديات، نقترح طريقة جديدة عبر تعلم المعلومات الجانبية والدفعتين المزدوجة (Side information and dual-prompts learning) للتعرف على الأفعال بدون معاينة مسبقة باستخدام الهيكل العظمي (STAR) على المستوى الدقيق. وبشكل خاص، 1) نقوم بتقسيم الهيكل العظمي إلى عدة أجزاء بناءً على هيكله الطوبولوجي ونقدم المعلومات الجانبية المتعلقة بوصف حركات الجسم البشرية متعددة الأجزاء للتحاف بين الهيكل العظمي والفضاء الدلالي على المستوى الدقيق؛ 2) نصمم دفعات السمات البصرية والأجزاء الدلالية لتحسين الكثافة داخل الفئة داخل فضاء الهيكل العظمي والقابلية للتمايز بين الفئات داخل الفضاء الدلالي، وذلك بهدف تمييز الأفعال ذات الشبه الكبير. تظهر التجارب الواسعة أن طرحتنا تحقق أفضل الأداء في الإعدادين ZSL وGZSL على مجموعات البيانات NTU RGB+D، NTU RGB+D 120، وPKU-MMD.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp