MultiBench는 15개 데이터 세트, 10개 모달리티, 20개 예측 작업, 6개 연구 분야를 포괄하는 체계적이고 통합된 대규모 멀티모달 학습 벤치마크입니다. MultiBench는 데이터 로딩, 실험 설정, 모델 평가를 간소화하고 표준화하는 자동화된 종단 간 머신 러닝 파이프라인을 제공합니다. 전체적인 평가를 달성하기 위해 MultiBench는 (1) 일반화를 연구하기 위한 평가 방법을 제공합니다. (2) 시간 및 공간 복잡도, (3) 모달 견고성.