HyperAIHyperAI

Command Palette

Search for a command to run...

الاهتمام بما أنت عليه: إشراف الذكاء الاصطناعي على الانتباه الذاتي للكشف عن النقاط الرئيسية والربط بين الحالات المعروفة

Sen Yang∗1,2 Zhicheng Wang3 Ze Chen2 Yanjie Li4 Shoukui Zhang5 Zhibin Quan1 Shu-Tao Xia4 Yiping Bao2 Erjin Zhou2 Wankou Yang1

الملخص

يقدم هذا البحث طريقة جديدة لحل مشكلة الكشف عن النقاط الرئيسية (keypoint detection) وربط المثيلات (instance association) باستخدام تقنية الترانسفورمر (Transformer). بالنسبة للنماذج المستخدمة في تقدير وضعية الأشخاص المتعددين من الأسفل إلى الأعلى (bottom-up multi-person pose estimation models)، فإنها تحتاج إلى كشف النقاط الرئيسية وتعلم المعلومات المرتبطة بين هذه النقاط. نعتقد أن هذه المشكلات يمكن حلها بالكامل بواسطة الترانسفورمر. بوجه خاص، فإن الانتباه الذاتي (self-attention) في الترانسفورمر يقيس الارتباطات بين أي زوج من المواقع، مما يمكنه من توفير معلومات ارتباطية لتصنيف النقاط الرئيسية. ومع ذلك، فإن أنماط الانتباه الأولية لا تزال غير خاضعة للرقابة الموضوعية، وبالتالي لا يوجد ضمان بأن النقاط الرئيسية ستركز دائمًا على المثيلات التي تنتمي إليها. لمعالجة هذا الأمر، نقترح نهجًا جديدًا لإشراف الانتباه الذاتي في الكشف عن نقاط الأشخاص المتعددين وربط المثيلات. من خلال استخدام أقنعة المثيلات (instance masks) لإشراف الانتباه الذاتي ليكون على دراية بالمثيلات (instance-aware)، يمكننا تعيين النقاط الرئيسية المحصلة إلى مثيلاتها المناسبة بناءً على درجات الانتباه الثنائية، دون الحاجة إلى استخدام حقول المتجهات التعويضية أو التضمين مثل النماذج القائمة على الشبكات العصبية التلافيفية (CNN-based bottom-up models). فائدة إضافية لمETHODتنا هي أنه يمكن الحصول مباشرة على نتائج تقسيم المثيلات للأفراد بأي عدد من مصفوفة الانتباه الخاضعة للإشراف، مما يبسط عملية تعيين البكسل. تظهر التجارب التي أجريت على تحدي كشف نقاط الأشخاص المتعددين في مجموعة بيانات COCO وعلى مهمة تقسيم المثيلات الشخصية فعالية وبساطة الطريقة المقترحة وتوضح طريقة واعدة لضبط سلوك الانتباه الذاتي لأغراض معينة.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp