IF-Bench est un banc d'essai de haute qualité pour la compréhension multimodale des images infrarouges, publié conjointement en 2025 par l'Institut d'automatisation de l'Académie chinoise des sciences et l'École d'intelligence artificielle de l'Université de l'Académie chinoise des sciences. Parmi les articles associés, on peut citer… IF-Bench : Évaluation comparative et amélioration des modèles linéaires multicouches pour les images infrarouges avec invite visuelle générativeL’objectif est d’évaluer systématiquement les capacités de compréhension sémantique des grands modèles de langage multimodaux (MLLM) pour les images infrarouges.

Cet ensemble de données contient 499 images infrarouges et 680 paires question-réponse visuelles (QRV). Les images proviennent de 23 bases de données d'images infrarouges différentes, assurant une distribution relativement équilibrée. L'ensemble de données est conçu autour d'une tâche de compréhension d'images infrarouges, couvrant 10 dimensions clés de cette compréhension. Toutes les questions sont proposées en chinois et en anglais, l'ordre des options étant aléatoire afin de garantir une répartition équitable des réponses correctes entre les options A à D.