MRR-Benchmark 다중 모드 판독 벤치마크 데이터 세트

다중 모드 독해(MMR) 벤치마크에는 텍스트, 글꼴, 시각적 요소, 경계 상자, 공간 관계, 기준 진실을 포함하는 11가지 작업에서 주석이 달린 550개의 질문-답변 쌍이 포함되어 있으며, 잘 설계된 평가 지표가 포함되어 있습니다.

이 벤치마크는 뉴욕주립대학교 버팔로 캠퍼스와 어도비 리서치의 연구원들에 의해 2024년에 발표되었습니다.MMR: 대규모 멀티모달 모델의 독해 능력 평가".