HyperAIHyperAI

Command Palette

Search for a command to run...

التحرير المستوي للقطع في التصوير ثلاثي الأبعاد باستخدام التوزيع ثلاثي الأبعاد مع عينة التقطير المعدلة للنقاط

Hayeon Kim Ji Ha Jang Se Young Chun

الملخص

لقد ساهمت التطورات الأخيرة في تمثيلات الأعصاب ثلاثية الأبعاد ونماذج التحرير على مستوى الأصناف في تمكين إنشاء محتوى ثلاثي الأبعاد عالي الجودة بشكل فعال. ومع ذلك، لا يزال تحقيق التحرير المحلي الدقيق ثلاثي الأبعاد تحديًا، خاصة في سياق "التناثر الجيوي" (Gaussian Splatting)، بسبب عدم توافق تقسيمات الأجزاء في الصور متعددة الزوايا (multi-view 2D part segmentations) والطبيعة الغامضة بشكل طبيعي لخسارة "تقطيع القيمة المصفوفة" (Score Distillation Sampling - SDS). لحل هذه القيود، نقترح "RoMaP"، إطارًا جديدًا لتحرير "التناثر الجيوي" المحلي ثلاثي الأبعاد، والذي يمكّن من إجراء تعديلات دقيقة وجريئة على مستوى الأجزاء. أولاً، نقدم وحدة إنشاء قناع ثلاثي الأبعاد قويًا باستخدام تنبؤنا بالعلامات المدرك للهندسة ثلاثية الأبعاد (3D-Geometry Aware Label Prediction - 3D-GALP)، والتي تستخدم معاملات الدوال التوافقية الكروية (Spherical Harmonics - SH) لتمثيل التغيرات في العلامات اعتمادًا على الزاوية المرصودة والخصائص الناعمة للعلامات، مما ينتج عنه تقسيمات دقيقة وموحدة للأجزاء عبر الزوايا المختلفة. ثانياً، نقترح خسارة SDS المُعدّلة التي تجمع بين خسارة SDS القياسية مع عوامل تعديل إضافية. على وجه الخصوص، تُقدّم وحدتنا لتحرير الأجزاء باستخدام منهجية "الخلط اللاتيني المُخطط له والجزء" (Scheduled Latent Mixing and Part - SLaMP)، خسارة "المرجع L1" (L1 anchor loss)، والتي تنتج صورًا ثنائية الأبعاد مُحرّرة للأجزاء ذات جودة عالية، وتحافظ على التعديلات فقط في المنطقة المستهدفة مع الحفاظ على وحدة السياق. كما تُحسّن عوامل التعديل الإضافية، مثل "إزالة الاحتمال الجيوي" (Gaussian prior removal)، المرونة من خلال السماح بالتعديلات خارج السياق الحالي، ووحدة قناع ثلاثي الأبعاد القوي تمنع التحرير غير المتوقع. تُظهر النتائج التجريبية أن RoMaP تحقق تحريرًا ثلاثي الأبعاد محليًا ذا جودة عالية تفوق جميع النماذج الحالية في المواقف المُعاد بناؤها والمُولدة من "التناثر الجيوي"، من حيث الجودة والكمية، مما يجعل من الممكن تحرير "التناثر الجيوي" ثلاثي الأبعاد على مستوى الأجزاء بشكل أكثر استقرارًا ومرونة.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp