Der Sports-1M-Datensatz enthält mehr als 1 Million Videos, die über von den Autoren angegebene YouTube-URLs abgerufen werden.

Seit der Zusammenstellung des Datensatzes wurden etwa 71 TP3T-Videos (Stand 2016) von YouTube-Uploadern entfernt. Der Datensatz enthält jedoch immer noch mehr als eine Million Videos und deckt 487 sportbezogene Kategorien mit 1.000 bis 3.000 Videos pro Kategorie ab. Durch die Analyse der mit Videos verknüpften Textmetadaten (z. B. Tags, Beschreibungen) verwendeten die Autoren die YouTube Topic API, um Videos automatisch in 487 Sportkategorien einzuordnen. Ungefähr 51 TP3T-Videos sind mit mehr als einer Kategorie gekennzeichnet.