HyperAIHyperAI

Command Palette

Search for a command to run...

تعلم التحويلات المكانية-الزمنية المشتركة لإعادة تكوين الفيديو

Yanhong Zeng; Jianlong Fu; Hongyang Chao

الملخص

إكمال الفيديو بجودة عالية من خلال ملء المناطق المفقودة في إطارات الفيديو هو مهمة واعدة ومعقدة. تستخدم الطرق الرائدة نماذج الانتباه لإكمال الإطار عن طريق البحث عن المحتوى المفقود من الإطارات المرجعية، ثم تكمل الفيديوهات بأكملها إطارة بإطارة. ومع ذلك، يمكن لهذه الطرق أن تعاني من نتائج انتباه غير متسقة على الأبعاد المكانية والزمانية، مما يؤدي غالبًا إلى ضبابية وعيوب زمانية في الفيديوهات. في هذا البحث، نقترح تعلم شبكة تحويل مشتركة مكانية-زمانية (STTN) لإكمال الفيديو. بشكل خاص، نقوم بتعبئة المناطق المفقودة في جميع الإطارات الدخولية بشكل متزامن باستخدام انتباه الذات، ونقترح تحسين STTN من خلال خسارة معاكسة مكانية-زمانية. لبيان تفوق النموذج المقترح، قمنا بإجراء تقييمات كمية وكيفية باستخدام أقنعة ثابتة قياسية وأقنعة أجرام متحركة أكثر واقعية. يمكن الوصول إلى مقاطع الفيديو التوضيحية عبر الرابط: https://github.com/researchmm/STTN.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
تعلم التحويلات المكانية-الزمنية المشتركة لإعادة تكوين الفيديو | مستندات | HyperAI