إعادة بناء الشكل والمادة والإضاءة باستخدام Neural-PBIR

إعادة بناء الشكل والمظهر السطحي المتغير مكانيًا لجسم في العالم المادي بالإضافة إلى الإضاءة المحيطة به استنادًا إلى صور ثنائية الأبعاد (مثل الصور الفوتوغرافية) للجسم، كان مشكلة قائمة منذ فترة طويلة في مجال الرؤية الحاسوبية والجرافيك. في هذا البحث، نقدم خط أنابيب إعادة بناء الأجسام دقيقًا وفعالًا للغاية يجمع بين إعادة بناء الأجسام القائمة على الشبكات العصبية وإعادة التحويل العكسية القائمة على الفيزياء (PBIR). يعتمد خط الأنابيب أولاً على استخدام إعادة بناء الشكل القائم على SDF العصبي لإنتاج شكل جسم عالي الجودة ولكنه محتمل أن يكون غير مثالي. ثم، نقدم مرحلة تقطير المواد والإضاءة العصبية لتحقيق توقعات عالية الجودة للمواد والإضاءة. في المرحلة الأخيرة، يتم تهيئة النتائج الأولية من خلال التوقعات العصبية، حيث نقوم بتنفيذ PBIR لتحسين النتائج الأولية والحصول على إعادة البناء النهائية عالية الجودة لشكل الجسم، المواد والإضاءة. تُظهر النتائج التجريبية أن خط الأنابيب الخاص بنا يتفوق بشكل كبير على الطرق الموجودة من حيث الجودة والأداء.