RxnBench는 화학 반응 이미지 이해, 다중 모드 추론, 과학적 질의 응답과 같은 작업에서 시각 언어 모델의 역량을 평가하도록 설계된 다중 모드 화학 반응 이미지 이해를 위한 시각적 질의 응답 데이터 세트입니다.

이 데이터세트는 유기화학 반응 이해에 관한 1,525개의 객관식 문제를 포함하고 있으며, 중국어와 영어로 제공됩니다. 이 문제들은 영향력이 높은 OpenAssess 저널의 305개 연구 자료를 기반으로 합니다. 각 자료에는 유기 반응 다이어그램 해석에 대한 5개의 객관식 시각 퀴즈 문제가 포함되어 있으며, 이미지 설명, 반응 내용 추출, 분자/구조 식별, 반응 메커니즘 평가 등의 영역을 다룹니다.