تعلم العمق الأحادي غير المشرف والحركة الذاتية مع البنيان والدلالات

نقدم نهجًا يستفيد من كل من البنية والدلالات لتعلم العمق والحركة الذاتية بطريقة غير مراقبة ومن خلال كاميرا أحادية العين. وبشكل أكثر تحديدًا، نقوم بنمذجة حركة الأشياء الفردية ونتعلم متجه الحركة ثلاثي الأبعاد لها مع العمق والحركة الذاتية بشكل مشترك. نحصل على نتائج أكثر دقة، خاصة في المشاهد الديناميكية الصعبة التي لم تتناولها النهج السابقة. هذا هو الإصدار الممتد لـ Casser et al. [AAAI'19]. تم توفير الكود والنماذج بشكل مفتوح المصدر على الرابط https://sites.google.com/corp/view/struct2depth.