MOT17 steht für Multiple Object Tracking 17, ein Datensatz, der für die Verfolgung mehrerer Ziele verwendet werden kann. Ähnlich wie bei der vorherigen Version MOT16 umfassen die Herausforderungen in diesem Datensatz sieben Szenen im öffentlichen Raum im Innen- und Außenbereich mit Fußgängern. Das Video jeder Szene ist in zwei Segmente unterteilt, eines zum Trainieren und eines zum Testen.

Dieser Datensatz erkennt Objekte in Videobildern mithilfe von drei Detektoren: SDP, Faster-RCNN und DPM. Diese Herausforderung akzeptiert sowohl Online- als auch Offline-Trackingmethoden, wobei die Offline-Trackingmethode zukünftige Videobilder verwendet, um die Flugbahn vorherzusagen.