TDAN: شبكة التحالف المتغيرة زمنياً لتحسين دقة الفيديو

يهدف تحسين دقة الفيديو (VSR) إلى استعادة إطار فيديو ذي دقة عالية (HR) واقعي من الإطار المنخفض الدقة (LR) المقابل له ومن عدة إطارات مجاورة (الإطارات الداعمة). نظرًا لحركة الكاميرات أو الأشياء المتغيرة، فإن الإطار المرجعي وكل إطار داعم غير محاذاة. لذلك، يعد التحالف الزمني مشكلة صعبة ومع ذلك مهمة لتحسين دقة الفيديو (VSR). غالبًا ما تستفيد الطرق السابقة لتحسين دقة الفيديو من التدفق البصري بين الإطار المرجعي وكل إطار داعم للفاف الإطارات الداعمة لتحقيق التحالف الزمني. وبالتالي، ستعتمد أداء هذه النماذج المستندة إلى الفاف الصور بشكل كبير على دقة تنبؤ التدفق البصري، وسيؤدي التدفق البصري غير الدقيق إلى تشوهات في الإطارات الداعمة الملفوفة، والتي ستنتقل أيضًا إلى الإطار المُعاد بناؤه ذو الدقة العالية (HR). للحد من هذا القيد، نقترح في هذا البحث شبكة تحالف زمنية قابلة للتكيّف (TDAN) لتوجيه الإطار المرجعي وكل إطار داعم بشكل تكيفي على مستوى الخصائص دون حساب التدفق البصري. تستخدم الشبكة TDAN خصائص كل من الإطار المرجعي والإطارات الداعمة لتوقع انحرافات أنوية اللف العينة بشكل ديناميكي. باستخدام الأنوية المقابلة، تقوم الشبكة TDAN بتحويل الإطارات الداعمة لمحاذاتها مع الإطار المرجعي. ولتنبؤ بإطار الفيديو ذو الدقة العالية (HR)، يتم استخدام شبكة إعادة بناء تأخذ الإطارات المحاذاة والإطار المرجعي كمدخلات. تظهر النتائج التجريبية فعالية النموذج المقترح المستند إلى الشبكة TDAN في مجال تحسين دقة الفيديو (VSR).