HyperAIHyperAI

Command Palette

Search for a command to run...

تحسين التقدير الثنائي الاتجاه للحركة لاستيفاء إطارات الفيديو

Xin Jin Longhai Wu Guotao Shen Youxin Chen Jie Chen Jayoon Koo Cheul-hee Hahm

الملخص

نقدّم خوارزمية جديدة، بسيطة ولكنها فعّالة، لاستيفاء الإطارات في مقاطع الفيديو القائمة على الحركة. تعتمد الطرق الحالية القائمة على الحركة في استيفاء الإطارات عادةً على نموذج مُدرّب مسبقًا لتدفق بصري أو على شبكة هرمية تعتمد على U-Net لتقدير الحركة، والتي تُعاني إما من حجم نموذج كبير أو من قدرة محدودة في التعامل مع الحالات المعقدة والحركة الكبيرة. في هذا العمل، وباستخدام دمج دقيق للتحويل الأمامي الموجه نحو المعطيات الوسيطة، ومحول ميزات خفيف الوزن، وحجم ترابط (correlation volume) داخل إطار هرمي متكرر، نستنتج نموذجًا صغيرًا يُقدّر في نفس الوقت الحركة الثنائية الاتجاه بين الإطارات المدخلة. ويبلغ حجم هذا النموذج 15 مرة أصغر من PWC-Net، معتمدًا في المقابل على معالجة أكثر موثوقية ومرونة للحالات الصعبة في الحركة. بناءً على الحركة الثنائية الاتجاه المقدرة، نُحول إطارات المدخلات وسمات سياقها إلى الإطار المتوسط، ثم نستخدم شبكة توليد لاستنتاج الإطار المتوسط من التمثيلات المُحولة. تُظهر خوارزميتنا أداءً ممتازًا في مجموعة واسعة من معايير استيفاء إطارات الفيديو. يتوفر الكود والنماذج المدربة على الرابط: \url{https://github.com/srcn-ivl/EBME}.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
تحسين التقدير الثنائي الاتجاه للحركة لاستيفاء إطارات الفيديو | مستندات | HyperAI