HyperAIHyperAI

Command Palette

Search for a command to run...

منذ 4 أشهر

شافل آند آتند: التكيف بين المجالات في الفيديو

{Jia-Bin Huang Gaurav Sharma Jinwoo Choi Samuel Schulter}

شافل آند آتند: التكيف بين المجالات في الفيديو

الملخص

نعالج مشكلة التكيّف بين المجالات في الفيديوهات بالنسبة لمهام التعرف على الحركات البشرية. مستوحى من تكييف المجالات القائم على الصور، يمكننا تنفيذ تكيّف الفيديو من خلال محاذاة ميزات الإطارات أو المقاطع من الفيديوهات المصدرية والمستهدفة. ومع ذلك، فإن محاذاة جميع المقاطع بالتساوي ليست مثالية، نظرًا لأن ليس جميع المقاطع مفيدة للوظيفة. كمُبتكر أول، نقترح آلية انتباه تركز على المقاطع الأكثر تمييزًا، وتحسّن مباشرةً محاذاة المستوى الفيديوي (بخلاف محاذاة مستوى المقطع). وبما أن الخلفيات غالبًا ما تختلف بشكل كبير بين المجال المصدر والمستهدف، فإن النموذج المُتأثر بالخلفيات في المجال المصدر يُظهر أداءً ضعيفًا عند التكيّف مع الفيديوهات في المجال المستهدف. لتسهيل هذا التحدي، كمُبتكر ثانٍ، نقترح استخدام تنبؤ ترتيب المقاطع كمهمة مساعدة. إن خسارة تنبؤ ترتيب المقاطع، عند دمجها مع خسارة التمييز المجالي، تشجع على تعلم تمثيلات تركز على الأشخاص والكائنات المشاركة في الحركات، بدلًا من الخلفيات غير المفيدة والمتباينة بشكل واسع بين المجالين المصدر والمستهدف. نُظهر تجريبيًا أن كلا المكونين يسهمان إيجابيًا في أداء التكيّف. ونُعلن عن أداءً من الطراز الأول على اثنين من ثلاث بنيات عامة صعبة، اثنان منها مبنيان على مجموعتي بيانات UCF وHMDB، وواحدة على مجموعة بيانات Kinetics إلى مجموعات بيانات NEC-Drone. كما ندعم الاستنتاجات والنتائج بنتائج نوعية.

المعايير القياسية

معيار قياسيالمنهجيةالمقاييس
domain-adaptation-on-ucf-hmdb-fullSAVA
Accuracy: 82.22
unsupervised-domain-adaptation-on-hmdb-ucfSAVA
Accuracy: 91.24
unsupervised-domain-adaptation-on-ucf-hmdbSAVA
Accuracy: 82.22

بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — عجّل تطوير الذكاء الاصطناعي الخاص بك من خلال البرمجة المشتركة المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة المشتركة بالذكاء الاصطناعي
وحدات معالجة رسومات جاهزة
أفضل الأسعار
ابدأ الآن

Hyper Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp