HyperAIHyperAI

Command Palette

Search for a command to run...

تقرير فني GR-Dexter

Abstract

أظهرت نماذج الرؤية واللغة والفعل (VLA) قدرة على التحكم بالروبوتات على مدى فترات طويلة وفقًا لتعليمات لغوية، لكن معظم الأنظمة الحالية محدودة باستخدام المُمسِكات فقط. ما زال التوسع في سياسات VLA لتطبيقات الروبوتات ذات اليدين (الروبوتات ثنائية الأيدي) التي تمتلك يدين ذكيتين ذات درجات حرية عالية (DoF) يشكل تحديًا كبيرًا، وذلك بسبب التوسع في فضاء الإجراءات، والتداخل المتكرر بين اليد والجسم، بالإضافة إلى التكلفة المرتفعة لجمع بيانات الروبوتات الحقيقية. نقدم في هذا العمل إطارًا شاملاً يجمع بين الأجهزة والنموذج والبيانات يُسمى GR-Dexter، لتمكين التحكم العام القائم على VLA في روبوت ثنائي الأيدي ذي يدين ذكيتين. يعتمد نهجنا على دمج تصميم يد روبوتية صغيرة بـ 21 درجة حرية، ونظام تلبيس يدوي ثنائي الأيدي سهل الاستخدام لجمع بيانات الروبوتات الحقيقية، بالإضافة إلى وصفة تدريبية تستخدم مسارات الحركة التي تم جمعها عبر التحكم عن بعد، إلى جانب مجموعات بيانات ضخمة للرؤية واللغة، وبيانات مُختارة بعناية من تجارب متعددة الأشكال (cross-embodiment). وقد أظهرت تقييمات واقعية لـ GR-Dexter أداءً قويًا في المهام اليومية الطويلة الأمد، وتمكّن من التمثيل العام لمهام رفع ووضع الأشياء، مع تحسين المرونة تجاه الأشياء والتعليمات غير المعروفة. نأمل أن يُمثّل GR-Dexter خطوة عملية نحو تحقيق التحكم العام في الروبوتات ذات الأيدي الذكية.


Build AI with AI

From idea to launch — accelerate your AI development with free AI co-coding, out-of-the-box environment and best price of GPUs.

AI Co-coding
Ready-to-use GPUs
Best Pricing

HyperAI Newsletters

اشترك في آخر تحديثاتنا
سنرسل لك أحدث التحديثات الأسبوعية إلى بريدك الإلكتروني في الساعة التاسعة من صباح كل يوم اثنين
مدعوم بواسطة MailChimp