مركز الانتباه: تجميع النقطة المحورية عبر الانتباه لتقدير وضعية أكثر من شخص

نُقدّم "CenterGroup"، وهي إطار عمل يعتمد على الانتباه لتقدير وضعية الإنسان من مجموعة من النقاط المميزة دون اعتبار الهوية (identity-agnostic keypoints) وتنبؤات مركز الأشخاص في الصورة. يستخدم نهجنا نموذج الترانسفورمر لاستخلاص تمثيلات واعية بالسياق لجميع النقاط المكتشفة ومركبات الأشخاص، ثم يطبّق الانتباه متعدد الرؤوس لربط المفاصل مباشرةً بمركبات الأشخاص المقابلة لها. في حين تعتمد معظم الطرق من النوع السفلي (bottom-up) على خوارزميات تجميع غير قابلة للتعلم أثناء التقييم، فإن CenterGroup تستخدم آلية انتباه قابلة للتمييز بالكامل، والتي تم تدريبها بشكل متكامل (end-to-end) مع كاشف النقاط المميزة لدينا. نتيجة لذلك، تحقق طريقة我们的 أداءً من الطراز الرائد (state-of-the-art) مع تسريع يصل إلى 2.5 مرة في وقت التقييم مقارنة بالطرق السفلية الأخرى المتنافسة. يمكن الوصول إلى الكود الخاص بنا من خلال الرابط: https://github.com/dvl-tum/center-group.