التحرير المستوي للقطع في التصوير ثلاثي الأبعاد باستخدام التوزيع ثلاثي الأبعاد مع عينة التقطير المعدلة للنقاط

لقد ساهمت التطورات الأخيرة في تمثيلات الأعصاب ثلاثية الأبعاد ونماذج التحرير على مستوى الأصناف في تمكين إنشاء محتوى ثلاثي الأبعاد عالي الجودة بشكل فعال. ومع ذلك، لا يزال تحقيق التحرير المحلي الدقيق ثلاثي الأبعاد تحديًا، خاصة في سياق "التناثر الجيوي" (Gaussian Splatting)، بسبب عدم توافق تقسيمات الأجزاء في الصور متعددة الزوايا (multi-view 2D part segmentations) والطبيعة الغامضة بشكل طبيعي لخسارة "تقطيع القيمة المصفوفة" (Score Distillation Sampling - SDS). لحل هذه القيود، نقترح "RoMaP"، إطارًا جديدًا لتحرير "التناثر الجيوي" المحلي ثلاثي الأبعاد، والذي يمكّن من إجراء تعديلات دقيقة وجريئة على مستوى الأجزاء. أولاً، نقدم وحدة إنشاء قناع ثلاثي الأبعاد قويًا باستخدام تنبؤنا بالعلامات المدرك للهندسة ثلاثية الأبعاد (3D-Geometry Aware Label Prediction - 3D-GALP)، والتي تستخدم معاملات الدوال التوافقية الكروية (Spherical Harmonics - SH) لتمثيل التغيرات في العلامات اعتمادًا على الزاوية المرصودة والخصائص الناعمة للعلامات، مما ينتج عنه تقسيمات دقيقة وموحدة للأجزاء عبر الزوايا المختلفة. ثانياً، نقترح خسارة SDS المُعدّلة التي تجمع بين خسارة SDS القياسية مع عوامل تعديل إضافية. على وجه الخصوص، تُقدّم وحدتنا لتحرير الأجزاء باستخدام منهجية "الخلط اللاتيني المُخطط له والجزء" (Scheduled Latent Mixing and Part - SLaMP)، خسارة "المرجع L1" (L1 anchor loss)، والتي تنتج صورًا ثنائية الأبعاد مُحرّرة للأجزاء ذات جودة عالية، وتحافظ على التعديلات فقط في المنطقة المستهدفة مع الحفاظ على وحدة السياق. كما تُحسّن عوامل التعديل الإضافية، مثل "إزالة الاحتمال الجيوي" (Gaussian prior removal)، المرونة من خلال السماح بالتعديلات خارج السياق الحالي، ووحدة قناع ثلاثي الأبعاد القوي تمنع التحرير غير المتوقع. تُظهر النتائج التجريبية أن RoMaP تحقق تحريرًا ثلاثي الأبعاد محليًا ذا جودة عالية تفوق جميع النماذج الحالية في المواقف المُعاد بناؤها والمُولدة من "التناثر الجيوي"، من حيث الجودة والكمية، مما يجعل من الممكن تحرير "التناثر الجيوي" ثلاثي الأبعاد على مستوى الأجزاء بشكل أكثر استقرارًا ومرونة.