Ensemble De Données De Référence D'apprentissage Multimodal À Grande Échelle MultiBench

MultiBench est un benchmark d'apprentissage multimodal à grande échelle, systématique et unifié, couvrant 15 ensembles de données, 10 modalités, 20 tâches de prédiction et 6 domaines de recherche. MultiBench fournit un pipeline d'apprentissage automatique automatisé de bout en bout qui simplifie et standardise le chargement des données, la configuration des expériences et l'évaluation des modèles. Pour réaliser une évaluation holistique, MultiBench fournit des méthodes d’évaluation pour étudier (1) la généralisation ; (2) complexité temporelle et spatiale, et (3) robustesse modale.