SHAPES는 Swarm Heuristics based Adaptive and Penalized Estimation of Splines의 전체 이름으로, 여러 객체 간의 공간적, 논리적 관계를 이해하기 위한 벤치마크 시스템을 제공하는 것을 목표로 하는 합성 이미지 데이터 세트입니다.

이 데이터 세트는 색깔 있는 모양의 배열에 대한 복잡한 질문으로 구성되어 있습니다. 이러한 질문은 개념과 관계의 조합을 중심으로 구성됩니다. 예를 들어, 원 위에 빨간색 모양이 있습니까? 질문에는 2~4개의 속성, 객체 유형 또는 관계가 포함됩니다. 이 데이터 세트에는 244개의 질문과 15,616개의 이미지가 포함되어 있으며, 모든 질문에는 '예' 또는 '아니요'로 답할 수 있는 답변(및 해당 지원 이미지)이 있습니다. 이렇게 하면 학습 편향의 위험이 없어집니다.

각 이미지는 3×3 객체 그리드가 있는 30×30 RGB 이미지입니다. 각 객체의 속성에는 모양(원형, 사각형, 삼각형), 색상(빨간색, 초록색, 파란색), 크기(작음, 큼)가 포함됩니다.