ChartQA: 차트에 대한 시각적 및 논리적 추론을 위한 질문 응답 벤치마크

차트는 데이터 분석에 매우 널리 사용됩니다. 차트를 탐색할 때 사람들은 종종 여러 논리적 및 산술적 연산을 포함하는 다양한 복잡한 추론 질문을 합니다. 또한 그들의 질문에서 차트의 시각적 특성을 자주 언급합니다. 그러나 대부분의 기존 데이터셋은 이러한 복잡한 추론 질문에 초점을 맞추지 않으며, 질문은 템플릿 기반으로 이루어지고 답변은 고정된 어휘에서 나옵니다. 본 연구에서는 9,600개의 인간이 작성한 질문과 23,100개의 인간이 작성한 차트 요약에서 생성된 질문을 포함하는 대규모 벤치마크를 제시합니다. 이 벤치마크에서 시각적 및 논리적 추론을 통합적으로 처리하기 위한 두 가지 트랜스포머 기반 모델을 소개합니다. 이 모델들은 차트의 시각적 특성과 데이터 표를 결합하여 질문에 답합니다. 우리의 모델은 이전 데이터셋뿐만 아니라 우리 벤치마크에서도 최신 성능을 달성하였지만, 평가 결과는 복잡한 추론 질문에 대한 답변에서 여전히 여러 도전 과제가 있음을 보여줍니다.