HyperAIHyperAI
منذ 14 أيام

Hi3DEval: تطوير تقييم التوليد ثلاثي الأبعاد من خلال الصلاحية الهرمية

Yuhan Zhang, Long Zhuo, Ziyang Chu, Tong Wu, Zhibing Li, Liang Pan, Dahua Lin, Ziwei Liu
Hi3DEval: تطوير تقييم التوليد ثلاثي الأبعاد من خلال الصلاحية الهرمية
الملخص

رغم التقدم السريع في إنشاء المحتوى ثلاثي الأبعاد، يظل تقييم الجودة للعناصر ثلاثية الأبعاد المُنشأة تحديًا كبيرًا. تعتمد الطرق الحالية بشكل رئيسي على مقاييس تعتمد على الصور، وتعمل فقط على مستوى الكائن، مما يحد من قدرتها على التقاط الترابط المكاني، وواقعية المواد، والتفاصيل الدقيقة بدقة عالية.1) لمعالجة هذه التحديات، نقدّم Hi3DEval، وهي إطار تقييم هرمي مصمم خصيصًا للمحتوى ثلاثي الأبعاد الناتج عن النماذج التوليدية. يدمج هذا الإطار تقييمًا على مستوى الكائن وعلى مستوى الجزء، ما يمكّن من إجراء تقييمات شاملة عبر أبعاد متعددة، بالإضافة إلى تحليل دقيق لجودة الناتج. علاوةً على ذلك، نوسع تقييم النسيج ليتجاوز المظهر الجمالي، من خلال تقييم واقعية المواد بشكل صريح، مع التركيز على خصائص مثل الانعكاسية (albedo)، والتشبع (saturation)، والمعادن (metallicness).2) لدعم هذا الإطار، نُنشئ Hi3DBench، وهي مجموعة بيانات ضخمة تضم مجموعة متنوعة من العناصر ثلاثية الأبعاد، مع تعليقات عالية الجودة، مدعومة بPipeline موثوقة لعملية التصنيف متعددة الوكلاء. كما نقترح نظامًا تلقائيًا لتقييم الجودة يعتمد على تمثيلات ثلاثية الأبعاد هجينة. وبشكل خاص، نستخدم تمثيلات قائمة على الفيديو لتقييم الكائنات والمواد، بهدف تحسين نمذجة الاتساق المكاني الزمني، واستخدام الميزات ثلاثية الأبعاد المُدرّبة مسبقًا لتقييم التفاصيل الدقيقة على مستوى الأجزاء. أظهرت التجارب الواسعة أن نهجنا يتفوق على المقاييس القائمة على الصور في نمذجة الخصائص ثلاثية الأبعاد، ويحقق تطابقًا أفضل مع تفضيلات البشر، مقدّمًا بديلًا قابلاً للتوسع مقابل التقييمات اليدوية. يمكن الاطلاع على صفحة المشروع من خلال: https://zyh482.github.io/Hi3DEval/.