Wonder3D: تحويل الصورة الفردية إلى ثلاثية الأبعاد باستخدام التوسع عبر المجالات

في هذا العمل، نقدم Wonder3D، وهي طريقة جديدة لتقديم شبكات ملمسة عالية الدقة بفعالية من صور ذات زاوية واحدة. الطرق الحديثة التي تعتمد على تقنية التقطير النسبي للدرجات (Score Distillation Sampling - SDS) أظهرت إمكانية استعادة الهندسة ثلاثية الأبعاد من أولويات التوسع ثنائية الأبعاد، لكنها غالبًا ما تعاني من عملية تحسين مكلفة زمنيًا لكل شكل وهندسة غير متسقة. في المقابل، هناك بعض الأعمال التي تنتج المعلومات ثلاثية الأبعاد مباشرة عبر استدلالات شبكة سريعة، ولكن نتائجها غالبًا ما تكون منخفضة الجودة وتفتقر إلى التفاصيل الهندسية. لتحسين جودة الصور ثنائية الأبعاد إلى ثلاثية الأبعاد بشكل شامل، نقترح نموذج توسع بين المجالات يولد خرائط عادية متعددة الزوايا والصور الملونة المقابلة لها. لضمان الاستقرار، نستخدم آلية انتباه متعددة الزوايا بين المجالات تسهل تبادل المعلومات بين الزوايا والمجالات. وأخيرًا، نقدم خوارزمية دمج عادي واعٍ بالهندسة تستخرج أسطحًا عالية الجودة من التمثيلات ثنائية الأبعاد المتعددة الزوايا. تُظهر تقييماتنا الواسعة أن طرقنا تحقق نتائج إعادة بناء عالية الجودة وتعميمًا قويًا وكفاءة معقولة مقارنة بالأعمال السابقة.