Der Skizzendatensatz enthält über 20.000 Skizzen, die gleichmäßig auf 250 Objektkategorien verteilt sind. Die Objektkategorien in diesem Datensatz basieren auf den folgenden Kriterien:

• Erschöpfend: Diese Kategorien decken die meisten Objekte, denen man im Alltag häufig begegnet, erschöpfend ab.
• Erkennbar: Diese Kategorien sind allein anhand ihrer Form und unabhängig vom Kontext erkennbar.
• Spezifisch: Diese Kategorien sind spezifisch genug, um relativ wenige visuelle Darstellungen zu haben. „Tiere“ oder „Musikinstrumente“ sind keine guten Objektkategorien, da sie viele Unterkategorien haben.