VTGAN: التركيب شبه المشرف للصور الشبكية وتوقع الأمراض باستخدام متحولات الرؤية

في التصوير الوعائي بالفلوريسين (FA)، يتم حقن صبغة خارجية في مجرى الدم لتصوير بنية الأوعية الدموية في الشبكية. يمكن أن تسبب الصبغة المحقونة ردود فعل سلبية مثل الغثيان، القيء، الصدمة الحساسية وحتى الموت. بخلاف ذلك، يعتبر التصوير القاعي الملون تقنية غير جراحية تُستخدم لتصوير الشبكية لكنها لا تتمتع بدقة كافية لالتقاط بنية أوعيتها الدموية. الطريقة الوحيدة غير الجراحية لتصوير الأوعية الدموية في الشبكية هي التصوير الوعائي بتوموغرافيا الكتلة البصرية (OCTA). ومع ذلك، فإن معدات OCTA باهظة الثمن، وتصوير مستقر محدود إلى مناطق صغيرة على الشبكية. في هذا البحث، نقترح شبكة مولدة معادية شرطية جديدة (GAN) قادرة على إنشاء صور FA من الصور القاعية بشكل متزامن مع التنبؤ بالتدهور الشبكي. يحظى النظام المقترح بميزة معالجة مشكلة تصوير الأوعية الدموية في الشبكية بطريقة غير جراحية بالإضافة إلى التنبؤ بوجود تشوهات شبكيّة. نستخدم نهجًا شبه مشرف عليه لتدريب GAN الخاص بنا باستخدام خسائر ذات أوزان متعددة على أنماط بيانات مختلفة. تؤكد تجاربنا أن الهندسة المقترحة تتفوق على شبكات الإنتاج الأكثر حداثةً وأفضل مستوى للانتقال من التصوير القاعي إلى التصوير الوعائي. علاوةً على ذلك، فإن تمييزاتنا المستندة إلى محول الرؤيا تعمم بشكل جيد للغاية على مجموعات بيانات خارج التوزيع للتنبؤ بأمراض الشبكية.