HyperAIHyperAI

Command Palette

Search for a command to run...

التعلم البيبليتى العدواني لتكيف المجال الفيديوي

Yadan Luo Zi Huang Zijian Wang Zheng Zhang Mahsa Baktashmotlagh

الملخص

تُعد تقنيات التكيّف الحدودي، التي تركز على تكييف النماذج بين مجالات ذات توزيعات مختلفة، نادرة الاستكشاف في مجال التعرف على الفيديو، وذلك بسبب التغيرات الكبيرة في البُعد المكاني والزمني بين المجال المصدر (أي مجال التدريب) والمجال الهدف (أي مجال الاختبار). وبسبب ذلك، فإن الدراسات الحديثة في مجال التكيّف البصري التي تعتمد على التعلم العدواني لتوحيد تمثيلات الفيديو المصدرية والهدفية وتعزيز قابلية نقل الميزات ليست فعالة بشكل كبير في سياق الفيديو. ولتجاوز هذه القيود، نقدم في هذا البحث نموذج تصنيف فيديو غير مُعتمد على المجال (domain-agnostic) بدلًا من تعلم تمثيلات ثابتة بالنسبة للمجال (domain-invariant)، ونُقدّم إطار عمل يُسمى التعلم العدواني ثنائي الرسم البياني (Adversarial Bipartite Graph, ABG) الذي يُمثّل تفاعلات المجال المصدر والمجال الهدف مباشرةً من خلال بنية شبكة من نوع الرسم البياني الثنائي. بشكل خاص، يتم أخذ الإطارات المصدرية والهدفية كعُقد متنوعة (heterogeneous vertexes)، بينما تُقاس الحواف التي تربط بين نوعين من العقد بدرجة التقارب بينها. ومن خلال عملية تبادل الرسائل (message-passing)، يُجمّع كل عقدة الميزات من جيرانها المتنوعين، مما يُجبر الميزات القادمة من نفس الفئة على التداخل بشكل متساوٍ. ويؤدي التعرض الصريح للمرشح الفيديو لهذا النوع من التمثيلات عبر الحدود خلال مراحل التدريب والاختبار إلى تقليل التحيّز تجاه البيانات المصنفة من المجال المصدر، ما يُفضي بدوره إلى تحسين التعميم على المجال الهدف. ولتعزيز قدرة النموذج واختبار متانة البنية المقترحة في مهام التحويل الصعبة، نوسع نموذجنا ليعمل في بيئة شبه مُراقبة باستخدام رسم بياني ثنائي آخر على مستوى الفيديو. وأظهرت تجارب واسعة أجريت على أربع معايير (benchmarks) فعالية المنهج المقترح مقارنةً بالأساليب المتطورة (SOTA) في مهمة التعرف على الفيديو.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp