Caltech-256 Dataset 是 Caltech-101 Dataset 的改进版，其主要有以下几点改动： a）类别数量增加一倍以上； b）任何类别中图像的最小数量从 31 增加到 80； c）避免因图像旋转造成的伪影； d）引入了一个新的更大的杂波类别来测试背景拒绝。 该数据集涵盖 256 个类别共计 20607 张图片，由加州理工学院的李菲菲、马克安德烈托和 Marc’Aurelio Ranzato 收集。