HyperAIHyperAI

Command Palette

Search for a command to run...

المحوّل التوقيتي للإجراءات الضعيف المراقب مع قمع الإيجابيات الخاطئة الموجهة بـ Actionness

Zilei Wang Zhilin Li

الملخص

تهدف التصنيف الزمني للإجراءات الضعيف المراقب إلى تحديد الحدود الزمنية لInstances الإجرائية في مقاطع الفيديو غير المُعدّلة باستخدام تسميات على مستوى الفيديو وتعيينها إلى الفئة الإجرائية المقابلة. عادةً، يتم حل هذه المهمة من خلال مسار يُسمى "التحديد من خلال التصنيف"، والذي يُحدد Instances الإجرائية من خلال تصنيف مقاطع الفيديو القصيرة. ومع ذلك، نظرًا لأن هذا النهج يُحسّن دالة التصنيف على مستوى الفيديو، فإن التسلسلات الناتجة من التنشيط غالبًا ما تتعرض لتأثيرات من المشاهد المرتبطة بالفئات، مما يؤدي إلى عدد كبير من النتائج الخاطئة الإيجابية في التنبؤات. تتعامل العديد من الدراسات الحالية مع الخلفية كفئة مستقلة، مما يُجبر النموذج على تعلّم التمييز بين مقاطع الخلفية. لكن في ظل ظروف التدريب الضعيف، تكون معلومات الخلفية ضبابية وغير مؤكدة، مما يجعل هذا الأسلوب شديد الصعوبة. لتفادي تأثير النتائج الخاطئة الإيجابية، نقترح إطارًا جديدًا يُسمى "قمع النتائج الخاطئة الإيجابية الموجهة بالفعل الإجرائي". يسعى هذا الأسلوب إلى قمع الخلفيات الخاطئة دون إدخال فئة الخلفية. أولاً، نقترح فرعًا تدريبيًا ذاتيًا للإحساس الإجرائي (actionness)، لتعلم الإحساس الإجرائي المستقل عن الفئة، والذي يمكنه تقليل تأثير معلومات المشهد المرتبطة بالفئة من خلال تجاهل تسميات الفيديو. ثانيًا، نقترح وحدة قمع النتائج الخاطئة الإيجابية لاستخراج مقاطع النتائج الخاطئة الإيجابية وقمعها. وأخيرًا، نُدخل وحدة تعزيز المقدمة (foreground enhancement)، التي توجه النموذج لتعلم المقدمة باستخدام آلية الانتباه بالإضافة إلى الإحساس الإجرائي المستقل عن الفئة. أجرينا تجارب واسعة على ثلاث معايير (THUMOS14، ActivityNet1.2، وActivityNet1.3). تُظهر النتائج فعالية طريقة لدينا في قمع النتائج الخاطئة الإيجابية، وتحقيقها لأفضل أداء مُحقّق حتى الآن. الكود: https://github.com/lizhilin-ustc/AFPS.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp