منذ 2 أشهر
الهبوط: الملاحة اللغوية الطبيعية والتفكير المكاني في البيئات الشارعية البصرية
Howard Chen; Alane Suhr; Dipendra Misra; Noah Snavely; Yoav Artzi

الملخص
ندرس مشكلة التفكير المشترك في اللغة والرؤية من خلال مهمة التنقل والاستدلال المكاني. نقدم مهمة وقاعدة بيانات Touchdown، حيث يجب على العميل أولاً اتباع تعليمات التنقل في بيئة حضرية بصرية حقيقية، ثم تحديد موقع موصوف بلغة طبيعية لإيجاد كائن مخفي في الموقع المستهدف. تحتوي البيانات على 9,326 مثالًا لتعليمات باللغة الإنجليزية ووصف مكاني مقترن بعروض توضيحية. تظهر التحليلات التجريبية أن البيانات تمثل تحديًا مفتوحًا للطرق الحالية، وأن التحليل اللغوي النوعي يكشف عن استخدام أكثر غنى للاستدلال المكاني مقارنة بالمصادر ذات الصلة.