HyperAIHyperAI

Command Palette

Search for a command to run...

4DNeX: نمذجة التوليد الأربعة الأبعاد ذات التغذية الأمامية أصبحت سهلة

Zhaoxi Chen Tianqi Liu Long Zhuo Jiawei Ren Zeng Tao He Zhu Fangzhou Hong Liang Pan Ziwei Liu

الملخص

نقدم 4DNeX، أول إطار عمل من نوع التغذية الأمامية لإنشاء تمثيلات مشهد ثلاثية الأبعاد ديناميكية (أي 4D) من صورة واحدة. على عكس الطرق الحالية التي تعتمد على عمليات تحسين مكلفة من حيث الحوسبة أو تتطلب إدخالات فيديو متعددة الإطارات، يُمكّن 4DNeX من توليد صورة 4D من صورة واحدة بشكل فعّال ونهائي (end-to-end) من خلال ضبط دقيق لنموذج توزيع فيديو مُدرّب مسبقًا. وبشكل محدد، 1) لمعالجة ندرة البيانات 4D، قمنا ببناء مجموعة بيانات كبيرة بعنوان 4DNeX-10M، تحتوي على تسميات 4D عالية الجودة تم إنشاؤها باستخدام تقنيات استرجاع متقدمة. 2) قمنا بطرح تمثيل فيديو موحد بـ 6 أبعاد (6D) يُعنى بتمثيل تسلسليين معًا: التسلسلات اللونية (RGB) والتسلسلات المكانية (XYZ)، مما يُسهل التعلّم المُنظّم لكل من المظهر والهندسة. 3) اقترحنا مجموعة من استراتيجيات التكييف البسيطة لكنها فعّالة، لتحويل نماذج توزيع الفيديو المُدرّبة مسبقًا إلى نماذج قادرة على تمثيل المشاهد 4D. تُنتج 4DNeX سحوبات نقطية ديناميكية عالية الجودة، مما يمكّن من توليد مقاطع فيديو من زوايا جديدة. أظهرت التجارب الواسعة أن 4DNeX تتفوّق على الطرق الحالية لتوليد المشاهد 4D من حيث الكفاءة والقابلية للتطبيق العام، مقدمةً حلًّا قابلاً للتوسع في مجال التحويل من الصورة إلى التمثيل 4D، ووضع الأساس لنماذج عالمية توليدية 4D قادرة على محاكاة تطوّر المشاهد الديناميكية.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp
4DNeX: نمذجة التوليد الأربعة الأبعاد ذات التغذية الأمامية أصبحت سهلة | مستندات | HyperAI