PatchmatchNet: التعلم متعدد المناظر لخوارزمية Patchmatch الاستريو

نقدم PatchmatchNet، وهو صياغة جديدة وقابلة للتعلم من Patchmatch للاستريو متعدد المناظر ذي الدقة العالية. بفضل سرعة الحساب العالية والمتطلبات الذاكرة المنخفضة، يمكن لـ PatchmatchNet معالجة صور ذات دقة أعلى وهو أكثر ملاءمة للتشغيل على الأجهزة ذات الموارد المحدودة مقارنة بالمنافسين الذين يستخدمون تنظيم الحجم التكلفة ثلاثي الأبعاد. ولأول مرة، نقوم بدمج عملية Patchmatch متعددة المقاييس بشكل تكراري في هيكلية قابلة للتدريب من النهاية إلى النهاية، وتحسين خوارزمية Patchmatch الأساسية باستخدام نظام انتشار وتقييم متكيف ومُتعلم جديد لكل تكرار. تظهر التجارب الواسعة أداءً تنافسيًا جدًا وقدرة تعميم عالية لطريقتنا على DTU وTanks & Temples وETH3D، ولكن بكفاءة أعلى بكثير من جميع النماذج ذات الأداء الرائد القائمة: فهي أسرع بمقدار ضعفين ونصف على الأقل من أفضل الأساليب الحالية مع استخدام ذاكرة أقل بمقدار الضعف.