أي سبلات: التوصيل المباشر لتمثيل غاوس ثلاثي الأبعاد من وجهات نظر غير مقيدة

نقدم AnySplat، وهو شبكة تغذية قدماً لتكوين وجهات نظر جديدة من مجموعات صور غير مكالمة. على عكس أنابيب الرسم العصبية التقليدية التي تتطلب وضعيات كاميرا معروفة وتحسينًا لكل مشهد، أو الطرق الحديثة للتغذية قدماً التي تتعثر تحت وزن الحسابات الكثيفة للوجهات النظر، فإن نموذجنا يتنبأ بكل شيء في خطوة واحدة. ينتج مرور واحد فقط مجموعة من المبادئ الأولية الجاوسية ثلاثية الأبعاد التي تحمل معلومات الهندسة والمظهر للمشهد، بالإضافة إلى الخواص الداخلية والخارجية للكاميرا المقابلة لكل صورة مدخلة. هذا التصميم الموحد يتوسع بسهولة إلى مجموعات بيانات متعددة الوجهات النظر تم التقاطها بشكل عشوائي دون أي تعليقات حول الوضعيات. في تقييمات شاملة بدون تعليمات سابقة، يتماشى AnySplat مع جودة الأساليب الأساسية التي تأخذ الوضعيات بعين الاعتبار في سيناريوهات الوجهات النظر النادرة والكثيفة بينما يتفوق على الأساليب الحالية التي لا تحتاج إلى الوضعيات. بالإضافة إلى ذلك، فإنه يقلل بشكل كبير من زمن الاستجابة للرسم مقارنة بالحقول العصبية القائمة على التحسين، مما يجعل تكوين وجهات النظر الجديدة في الوقت الحقيقي قابلاً للتحقيق في بيئات التقاط غير مقيدة.صفحة المشروع: https://city-super.github.io/anysplat/