HyperAIHyperAI

Command Palette

Search for a command to run...

قراءة العالم وكتابته ومشاركته والتفاعل معه عبر الفيديو: دراسة استقصائية نحو نماذج عالم فيديو موحّدة

Shengqiong Wu Meng Luo Bobo Li Ziwei Liu Shuicheng Yan Ming-Hsuan Yang Philip Torr Hao Fei

جدول المحتويات

الملخص

تقدّمت النماذج الأساسية للفيديو بسرعة في فهم المتواليات البصرية وتوليدها، بينما تسعى نماذج العالم الفيديوية إلى التقاط الديناميكيات الكامنة للعالم الذي تصوّره. وعلى الرغم من اختلاف أهدافهما، فإن كليهما يهتم بالعلاقة بين مشاهدات الفيديو وعالم متطوّر. تتبنّى هذه الدراسة الاستقصائية نمذجة العالم بوصفها عدسة موحّدة لفحص هذه التطورات. إذ ننظر إلى الفيديو المُلاحَظ بوصفه إسقاطًا جزئيًا فاقدًا للمعلومات ومرتّبًا زمنيًا لعالم زمني كامن، وننظّم الأدبيات حول أربع عمليات متكاملة: القراءة تستدلّ على خصائص العالم من الفيديو المُلاحَظ؛ والكتابة تركّب الفيديو انطلاقًا من شروط عالم محدّدة أو متعلَّمة؛ والمشاركة تدمج الفهم والتوليد عبر آليات نمذجة مشتركة؛ والتفاعل يتنبّأ بحالات العالم ويحدّثها في ظل أفعال ومشاهدات متطوّرة. ويميّز هذا المنظور بين التماسك الزمني في المتواليات المُلاحَظة أو المولَّدة وبين الاتساق في حالة العالم الكامنة. وعبر المهام والتمثيلات والنماذج ومجموعات البيانات والمعايير، نتتبّع تحوّلًا في التركيز من التعرّف على مستوى المقاطع ومن الدقة الإدراكية نحو الحالة المستمرة والتطوّر القابل للتحكّم والصلاحية الفيزيائية والسببية والتقييم المؤسَّس على التفاعل والقرارات اللاحقة، ونستخلص التحديات المفتوحة المترتّبة على ذلك.

One-sentence Summary

Researchers from University of Oxford, National University of Singapore, Nanyang Technological University, and University of California, Merced survey unified video world models by treating observed videos as partial, lossy, temporally ordered projections of latent temporal worlds and organizing methods around reading, writing, sharing, and interacting to advance persistent state, controllable evolution, physical and causal validity, and evaluation grounded in interaction and downstream decisions.


بناء الذكاء الاصطناعي بالذكاء الاصطناعي

من الفكرة إلى الإطلاق — سرّع تطوير الذكاء الاصطناعي الخاص بك مع المساعدة البرمجية المجانية بالذكاء الاصطناعي، وبيئة جاهزة للاستخدام، وأفضل أسعار لوحدات معالجة الرسومات.

البرمجة التعاونية باستخدام الذكاء الاصطناعي
وحدات GPU جاهزة للعمل
أفضل الأسعار

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp