HyperAIHyperAI
منذ 2 أشهر

الهبوط: الملاحة اللغوية الطبيعية والتفكير المكاني في البيئات الشارعية البصرية

Howard Chen; Alane Suhr; Dipendra Misra; Noah Snavely; Yoav Artzi
الهبوط: الملاحة اللغوية الطبيعية والتفكير المكاني في البيئات الشارعية البصرية
الملخص

ندرس مشكلة التفكير المشترك في اللغة والرؤية من خلال مهمة التنقل والاستدلال المكاني. نقدم مهمة وقاعدة بيانات Touchdown، حيث يجب على العميل أولاً اتباع تعليمات التنقل في بيئة حضرية بصرية حقيقية، ثم تحديد موقع موصوف بلغة طبيعية لإيجاد كائن مخفي في الموقع المستهدف. تحتوي البيانات على 9,326 مثالًا لتعليمات باللغة الإنجليزية ووصف مكاني مقترن بعروض توضيحية. تظهر التحليلات التجريبية أن البيانات تمثل تحديًا مفتوحًا للطرق الحالية، وأن التحليل اللغوي النوعي يكشف عن استخدام أكثر غنى للاستدلال المكاني مقارنة بالمصادر ذات الصلة.

الهبوط: الملاحة اللغوية الطبيعية والتفكير المكاني في البيئات الشارعية البصرية | أحدث الأوراق البحثية | HyperAI