YouCook2 ist der größte aufgabenorientierte Lehrvideo-Datensatz in der Vision-Community. Der Datensatz besteht aus 2.000 langen, unbearbeiteten YouTube-Videos mit 89 Rezepten. Die Gesamtlänge des Videos beträgt 176 Stunden und die durchschnittliche Länge eines einzelnen Videos beträgt 5,26 Minuten. Jedes Video dauerte weniger als 10 Minuten und wurde von Einzelpersonen in ihren eigenen vier Wänden mit einer nicht stationären Kamera aufgenommen.

Im Durchschnitt gibt es 22 Videos pro Rezept. Die Verfahrensschritte sind in jedem Video mit Zeitangaben versehen und in englischen Sätzen beschrieben. Die Videos wurden von YouTube heruntergeladen und aus der Third-Person-Perspektive gedreht. Der YouCook2-Datensatz enthält eine große Vielfalt an Rezeptarten und verschiedenen Kochstilen aus der ganzen Welt.