تعلم ارتباط البيانات للتتبع متعدد الكائنات باستخدام الإحداثيات فقط

نُقدِّم وحدةً جديدةً تعتمد على مُحَوِّل (Transformer) لحل مشكلة توصيل البيانات في تتبع الكائنات المتعددة. تعتمد هذه الوحدة، التي أُسْمِيتْ بـ TWiX، على إحداثيات مربعات التحديد (bounding boxes) المستخرجة من كاشف مُدرَّب مسبقًا، لتقدير درجة التماسك (affinity score) بين أزواج من المسارات المستخرجة من نافذتين زمنيتين مختلفتين. تم تدريب هذه الوحدة على مجموعات من المسارات بهدف التمييز بين أزواج المسارات الناتجة عن نفس الكائن، وبين تلك التي لا تنتمي إلى نفس الكائن. لا تعتمد هذه الوحدة على مقياس التداخل على الاتحاد (IoU)، ولا تتطلب أي معلومات مسبقة عن الحركة (motion priors)، ولا أي تقنيات لتعويض حركة الكاميرا. وبإدراج وحدة TWiX ضمن نموذج تطابق متسلسل آني (online cascade matching pipeline)، يحقق مُتَّبعنا C-TWiX أداءً يُعدّ من أفضل الأداء على مجموعتي بيانات DanceTrack وKITTIMOT، ويحقق نتائج تنافسية على مجموعة بيانات MOT17. سيتم إتاحة الشفرة البرمجية بعد النشر.