HyperAIHyperAI

Command Palette

Search for a command to run...

أداة ذكاء اصطناعي تساعد المكفوفين على "إحساس" بمواقع الأشياء في الزمن الحقيقي

طور فريق من الباحثين في جامعة بنسلفانيا أداة ذكية قائمة على الذكاء الاصطناعي تساعد الأشخاص ذوي الإعاقات البصرية على تحديد مواقع الأشياء في بيئتهم بشكل فوري. تُعرف هذه الأداة باسم "نافيسينس" (NaviSense)، وهي تطبيق يعمل على الهواتف الذكية، يُمكنه التعرف على الأشياء المطلوبة بناءً على أوامر صوتية، ويوجه المستخدم إلى موقعها عبر مزيج من الإشارات الصوتية والاهتزازات. أظهرت تجارب ميدانية أجريت مع 12 مشاركًا من الأشخاص ذوي الإعاقات البصرية أن نافيسينس يقلل من وقت البحث عن الأشياء بشكل كبير، ويدقق في تحديد المواقع بشكل أدق مقارنة بأدوات تجارية حالية. كما أبدى المستخدمون تجربة أفضل، حيث لاحظوا فعالية التوجيه الصوتي الذي يحدد الاتجاهات بدقة (مثل: "يمين، يسار، أعلى، أسفل")، مع تفاعل ملحوظ في توجيه حركة اليد من خلال تتبع حركة الهاتف، ما يُمكّن المستخدم من الوصول إلى الهدف بدقة أكبر. يُعدّ هذا التوجيه اليدوي أحد أبرز ميزات الأداة، إذ لم تكن هناك حلول مماثلة تقدم دعمًا فعّالاً في هذا المجال، وفقاً لـ"أجاي نارايانان سريدر"، الطالب الباحث في هندسة الحاسوب والقائد الرئيسي للبحث. سبق للفريق إجراء مقابلات مع أشخاص ذوي إعاقات بصرية لفهم التحديات الحقيقية التي يواجهونها، مما ساهم في تصميم ميزات مخصصة تلبي احتياجاتهم الفعلية. تُستخدم نافيسينس نماذج لغوية كبيرة (LLMs) ونماذج بصرية-لغوية (VLMs) المُستضافة على خوادم خارجية، ما يسمح لها بالتعرف على الأشياء في الوقت الفعلي دون الحاجة إلى تحميل نماذج مسبقة لها، وهو ما يُعد تقدماً كبيراً مقارنة بالأنظمة الحالية التي تعتمد على قواعد بيانات مُعدّة مسبقاً. كما تُتيح الأداة ميزة المحادثة التفاعلية: إذا لم تفهم الطلب بدقة، تطرح سؤالاً متابعاً لتحديد المطلوب بدقة أكبر. تم عرض نتائج البحث في مؤتمر SIGACCESS ASSETS '25، حيث حصلت الأداة على جائزة "أفضل اختيار من الجمهور". وتم نشر التفاصيل في م proceedings لمؤتمر ACM SIGACCESS حول الحوسبة والوصولية. يُشير فيجايكريشنان نارايانان، القائد العلمي للبحث، إلى أن الأداة على وشك الانتقال من المرحلة التجريبية إلى الإطلاق التجاري، لكن الفريق يعمل حالياً على تحسين كفاءة استهلاك الطاقة لتقليل استنزاف بطارية الهاتف، وتحسين أداء النماذج الذكية. ويشير إلى أن التعلم من التجارب السابقة والنسخة الحالية سيساعد في جعل الأداة أكثر سهولة وفعالية للجمهور المستهدف.

الروابط ذات الصلة

أداة ذكاء اصطناعي تساعد المكفوفين على "إحساس" بمواقع الأشياء في الزمن الحقيقي | القصص الشائعة | HyperAI