تقدير مظهر الإطار الفرعي ووضع 6D للأجسام المتحركة بسرعة

نُقدّم طريقة جديدة تُعَقِّب على الأجسام السريعة الحركة، وبشكل رئيسي الأشكال الكروية غير الموحدة، في جميع درجات الحرية الستة، مع تقدير مسار الحركة ثلاثي الأبعاد، والوضع ثلاثي الأبعاد، وتغيرات مظهر الجسم في نفس الوقت، بخطوة زمنية تمثل جزءًا من وقت التعرض للإطارات في الفيديو. تُمكّن عملية تحديد موقع الجسم ضمن الإطار الفرعي وتقدير مظهره من تحقيق تحسين زمني حقيقي (Super-resolution زمني واقعي) وتقدير دقيق للشكل. تعتمد الطريقة، التي تُسمى TbD-3D (التعقّب من خلال إزالة الضبابية في الأبعاد الثلاثة)، على خوارزمية إعادة بناء جديدة تحل مشكلة تفتيت الضبابية وتقسيم الصورة (matting) بشكل تدريجي. ويتم تقدير الدوران ثلاثي الأبعاد من خلال تقليل خطأ إعادة التمثيل (reprojection error). كمساهمة ثانية، نقدّم مجموعة بيانات جديدة صعبة تتضمّن أجسامًا سريعة الحركة تتغير مظهرها ومسافتها عن الكاميرا. وقد استُخدمت تسجيلات من كاميرات عالية السرعة ذات تأخير صفري بين فترات التعرض للإطارات لإنشاء مقاطع فيديو بترددات مختلفة، مع تزويدها ببيانات الحقيقة الأساسية (ground-truth) الخاصة بالمسار والوضع.