تحرير الحقول الإشعاعية الشرطية

يُعد مجال الإشعاع العصبي (NeRF) نموذجًا لمشهد يدعم توليد مناظر عالية الجودة، ويُحسَّن لكل مشهد على حدة. في هذه الورقة، نستكشف إمكانية تمكين المستخدم من تعديل نموذج NeRF على مستوى الفئة – المعروف أيضًا باسم مجال الإشعاع الشرطي – المدرب على فئة شكل معينة. وبشكل خاص، نقدم طريقة لنقل خرائط المستخدم المبسطة ثنائية الأبعاد (المسحات) إلى الفضاء ثلاثي الأبعاد، بهدف تعديل لون أو شكل منطقة محلية. أولاً، نقترح مجال إشعاع شرطي يدمج مكونات شبكة جديدة معيارية، بما في ذلك فرع الشكل الذي يُشترَك بين مختلف نماذج الكائنات. وبتحليل عدة أمثلة من نفس الفئة، يتعلم نموذجنا معاني الأجزاء الكامنة دون أي تدريب مراقب، مما يمكّن من نقل المسحات الثنائية الأبعاد المبسطة إلى المنطقة ثلاثية الأبعاد بأكملها (مثل مقعد الكرسي). ثم، نقترح استراتيجية تحديث شبكة هجينة تستهدف مكونات محددة في الشبكة، ما يحقق توازنًا بين الكفاءة والدقة. أثناء تفاعل المستخدم، نصيغ مشكلة تحسين تلبّي قيود المستخدم وتحافظ في الوقت نفسه على البنية الأصلية للكائن. نُظهر تطبيقنا على مهام تحرير متنوعة على ثلاث مجموعات بيانات لأشكال مختلفة، ونُظهر أنه يتفوق على الطرق السابقة في التحرير العصبي. وأخيرًا، نُجري تعديلات على مظهر وشكل صورة حقيقية، ونُظهر أن التحرير يمتد إلى مناظر جديدة مُستخلصة تلقائيًا.