HyperAIHyperAI

Command Palette

Search for a command to run...

كيف تُ-scalable إنتاج البيانات لذكاء اصطناعي مادي باستخدام دليل NVIDIA Cosmos

لتمكين تطوير نماذج الذكاء الاصطناعي الفيزيائي (Physical AI) بفعالية، تواجه الفرق التحديات الكبيرة في جمع بيانات واقعية متنوعة وواقعية بكميات كبيرة، نظرًا لتكاليفها العالية وصعوبتها وخطورتها. تُقدّم NVIDIA نموذج "Cosmos Open World Foundation Models" (WFMs) حلاً مبتكرًا من خلال توليد بيانات اصطناعية عالية الدقة وقابلة للتحكم، مع الحفاظ على الارتباط بالفيزياء الحقيقية. وتمتاز "كتاب وصفات Cosmos" (Cosmos Cookbook) بكونه دليلاً شاملاً لاستخدام هذه النماذج، حيث يقدّم وصفات خطوة بخطوة لمهام مثل التوليد، التصفية، التدريب اللاحق، والتقييم. أحد المكونات الأساسية في الكتاب هو نموذج "Cosmos Transfer"، الذي يُستخدم لتحويل المشاهد من عالم افتراضي إلى آخر بتحكم دقيق، مع الحفاظ على الاتساق المكاني والزمني. تُظهر الوصفات المختارة في الكتاب كيف يمكن استخدام هذا النموذج لتعزيز البيانات الحقيقية أو إنشاء بيئات جديدة. فمثلاً، يمكن تغيير خلفيات الفيديو باستخدام مزيج من "الحافة المُفلترة" (filtered_edge)، والتمييز (seg)، والتحكم البصري (vis)، مع الحفاظ على حركة الكائنات الرئيسية. كما يُمكن تعديل ظروف الإضاءة (من النهار إلى الليل) باستخدام الحافة والتحكم البصري، أو تغيير الألوان والملمس عبر التحكم في الحواف فقط، مما يضمن بقاء الهيكل ثابتًا. في مجال تطوير المركبات ذاتية القيادة، تُستخدم وصفات Cosmos Transfer لتحويل مقاطع فيديو واقعية أو مُحاكاة إلى بيئات متنوعة (مثل الطقس السيئ أو الطرق الوعرة)، مما يُمكّن من تدريب نماذج الرؤية والاتخاذ القرار على تجارب واقعية أكثر. كما يُستخدم النموذج في تحسين تجربة "المحاكاة إلى الواقع" (Sim2Real) في الروبوتات، حيث يُولّد بيانات واقعية من محاكاة مبسطة، مما يُسهم في تمكين الروبوتات من التعرف على عوائق شفافة أو صعبة التمييز، كما يُظهر مثال تجريبي نجاح النموذج في تجنب عوائق شفافة. بالإضافة إلى ذلك، يُقدّم الكتاب وصفة متكاملة لإنشاء بيانات اصطناعية لتطبيقات المدن الذكية، حيث تُحاكى مشاهد حركة المرور في بيئة CARLA، ثم تُعالج عبر Cosmos Transfer لإنتاج مقاطع فيديو واقعية مع بيانات مُعلّمة. يُعد تقييم جودة هذه البيانات أمرًا حاسمًا، ويُقدّم الكتاب مثالاً تطبيقيًا يُظهر كيف يمكن استخدام نموذج "Cosmos Reason" (نوع من نماذج الرؤية واللغة) لتقييم التزام المشاهد الاصطناعية بقوانين الفيزياء الواقعية. للاستفادة من الكتاب، يُنصح ببدء استكشاف الوصفات المتعلقة بالاستدلال أو التدريب اللاحق، مع اتباع التعليمات خطوة بخطوة. يشجع المشروع المجتمع المفتوح على المساهمة من خلال إضافة وصفات جديدة، وتحسين سير العمل، ومشاركة المعرفة. تشمل خطوات المساهمة: تفريغ المخزن، إنشاء فرع، إضافة المحتوى وفق القوالب، اختبار التغييرات، وتقديم طلب مراجعة. تُعتبر هذه المبادرة فرصة لبناء مكتبة معرفية مشتركة تُسهم في تطوير الذكاء الاصطناعي الفيزيائي بشكل جماعي. للاطلاع على المزيد من الوصفات، أو للاشتراك في تطوير المكتبة، يُمكن زيارة مخزن Cosmos Cookbook. كما يُشجع الباحثون والمهندسان على متابعة أحدث التطورات في أبحاث NVIDIA عبر مؤتمر NeurIPS، والانضمام إلى منتدى Cosmos للتفاعل مع المجتمع.

الروابط ذات الصلة