HyperAIHyperAI
منذ 2 أشهر

OneRestore: إطار شامل لإعادة التأهيل من التدهور المركب

Yu Guo; Yuan Gao; Yuxu Lu; Huilin Zhu; Ryan Wen Liu; Shengfeng He
OneRestore: إطار شامل لإعادة التأهيل من التدهور المركب
الملخص

في السيناريوهات الحقيقية، تظهر تشوهات الصور غالبًا كتدهورات مركبة، مما يمثل تداخلًا معقدًا بين عناصر مثل الإضاءة المنخفضة، الضباب، المطر والثلج. على الرغم من هذه الحقيقة، فإن طرق الاستعادة الموجودة تستهدف غالبًا أنواع تدهور منعزلة، مما يجعلها غير فعالة في البيئات التي تتواجد فيها عوامل متعددة للتدهور. لسد هذه الفجوة، تقترح دراستنا نموذج تصوير متعدد الوظائف يجمع بين أربعة نماذج فساد فيزيائي للتمثيل الدقيق للمواقف المعقدة للتدهور المركب. وفي هذا السياق، نقترح OneRestore (واحد استعادة)، إطار عمل جديد يستند إلى الترانسفورمر والمصمم للاستعادة المشهدية القابلة للتكيف والتحكم. يستخدم الإطار المقترح آلية انتباه متقاطع فريدة من نوعها، تدمج وصفاء المشهد المتدهورة مع خصائص الصورة، مما يسمح باستعادة دقيقة ومفصلة. يتيح نموذجنا وصفاء مشهد دخل متعددة الوظائف، تتراوح من التضمين النصي اليدوي إلى الاستخراجات الآلية المستندة إلى الخصائص البصرية. يتم تعزيز منهجيتنا أكثر من خلال خسارة استعادة التدهور المركب، باستخدام صور إضافية متدهورة كعينات سلبية لتقوية قيود النموذج. تظهر النتائج المقارنة على مجموعات بيانات مصنعة وحقيقية أن OneRestore هو حل متفوق، حيث يحقق تقدمًا كبيرًا في التعامل مع التدهورات المركبة والمعقدة.

OneRestore: إطار شامل لإعادة التأهيل من التدهور المركب | أحدث الأوراق البحثية | HyperAI