SHAPES, nom complet de Swarm Heuristics based Adaptive and Penalized Estimation of Splines, est un ensemble de données d'images synthétiques qui vise à fournir un système de référence pour comprendre les relations spatiales et logiques entre plusieurs objets.

Cet ensemble de données se compose de questions complexes sur les arrangements de formes colorées. Ces questions sont centrées sur des combinaisons de concepts et de relations, par exemple, y a-t-il une forme rouge au-dessus d’un cercle ? Les questions contiennent deux à quatre attributs, types d’objets ou relations. L'ensemble de données contient 244 questions et 15 616 images, toutes ayant une réponse par oui ou par non (et les images d'appui correspondantes). Cela élimine le risque de biais d’apprentissage.

Chaque image est une image RVB 30×30 avec une grille d’objets 3×3. Les propriétés de chaque objet incluent la forme (cercle, carré, triangle), la couleur (rouge, vert, bleu) et la taille (petite, grande).