VCBench는 알리바바와 저장대학교가 2025년에 공개한 명시적 시각적 종속성을 통한 다중 모드 수학적 추론을 평가하기 위한 벤치마크 데이터 세트입니다. 이 데이터 세트에는 1,720개의 질문-답변 쌍과 총 6,697개의 이미지가 포함되어 있습니다. 질문은 주로 다음 6가지 영역을 포함합니다.

• 시간과 달력: 두 가지 하위 범주(달력과 시계)에 대한 시간 추론 문제를 테스트하며, 시간 간격과 달력 기반 계산에 대한 이해가 필요합니다.
• 공간과 위치: 이 과제는 세 가지 하위 범주(방향, 위치, 장소)에서 공간적 추론에 초점을 맞춰 상대적인 위치, 방향, 공간적 관계에 대한 이해도를 평가합니다.
• 기하학과 도형: 각도, 사각형, 직사각형, 도형, 삼각형의 5가지 하위 범주를 다루는 문제는 기본적인 도형 인식에서 보다 복잡한 속성 분석까지 기본적인 기하학적 이해력을 테스트합니다.
• 물체와 운동: 3차원 물체와 운동 변환에 대한 이해도를 평가하는 두 가지 하위 범주(큐브와 이동)의 과제입니다.
• 추론 및 관찰: 두 하위 범주(추론 및 관찰)의 문제는 논리적 추론과 주의 깊은 시각적 관찰 기술을 테스트하도록 설계되었습니다.
• 조직 및 패턴: 패턴 인식, 시퀀싱 및 조직 논리를 평가하는 세 가지 하위 범주(조직, 패턴 및 가중치)에 걸친 과제입니다.

  

소환

@misc{wong2025vcbench
author    = {Zhikai Wang and Jiashuo Sun and Wenqi Zhang and Zhiqiang Hu and Xin Li and Fan Wang and Deli Zhao},
title     = {Benchmarking Multimodal Mathematical Reasoning with Explicit Visual Dependency},
year      = {2025},
eprint    = {2504.18589},
archivePrefix = {arxiv},
primaryClass  = {cs.CV},
url       = {https://arxiv.org/abs/2504.18589}
}