أومني تراكر: توحيد تتبع الكائنات من خلال التتبع باستخدام الكشف

تهدف التتبع الكائنات (OT) إلى تقدير مواقع الكائنات المستهدفة في تسلسل فيديو. وفقًا لما إذا كانت الحالات الأولية للكائنات المستهدفة محددة بواسطة تسميات مقدمة في الإطار الأول أو الفئات، يمكن تصنيف مهام التتبع إلى تتبع المثيل (مثل SOT وVOS) وتقديم تتبع الفئة (مثل MOT وMOTS وVIS). وبالاستفادة من المزايا التي تم تطويرها في كلا المجتمعين، نقترح نموذجًا جديدًا للتعقب مع الكشف، حيث يُعزز التعقب المعرفة السابقة للملامح في عملية الكشف، بينما يوفر الكشف لعملية التعقب صناديق مرشحة لربط الكائنات. وباستخدام هذا التصميم، تم تقديم نموذج تعقب موحد يُسمى OmniTracker، والذي يحل جميع مهام التعقب باستخدام بنية شبكة مشتركة بالكامل، ووزن نموذج مشترك، ومسار استنتاج موحد. وأظهرت التجارب الواسعة على 7 مجموعات بيانات للتعقب، بما في ذلك LaSOT وTrackingNet وDAVIS16-17 وMOT17 وMOTS20 وYTVIS19، أن OmniTracker يحقق نتائج مماثلة أو حتى أفضل من النماذج المخصصة لكل مهمة والأنماط الموحدة للتعقب.