IF-Bench ist ein hochwertiger Benchmark für das multimodale Verständnis von Infrarotbildern, der 2025 gemeinsam vom Institut für Automatisierung der Chinesischen Akademie der Wissenschaften und der Fakultät für Künstliche Intelligenz der Universität der Chinesischen Akademie der Wissenschaften veröffentlicht wurde. Zugehörige Publikationen umfassen… IF-Bench: Benchmarking und Verbesserung von MLLMs für Infrarotbilder mit generativer visueller EingabeZiel ist es, die Fähigkeiten multimodaler großer Sprachmodelle (MLLMs) zum semantischen Verständnis von Infrarotbildern systematisch zu evaluieren.

Dieser Datensatz umfasst 499 Infrarotbilder und 680 visuelle Frage-Antwort-Paare. Die Bilder stammen aus 23 verschiedenen Infrarotbilddatensätzen, wodurch eine relativ ausgewogene Verteilung gewährleistet ist. Der Datensatz basiert auf einer Aufgabe zur Infrarotbildanalyse und deckt zehn zentrale Dimensionen der Bildverarbeitung ab. Alle Fragen werden sowohl auf Chinesisch als auch auf Englisch gestellt, wobei die Reihenfolge der Antwortmöglichkeiten zufällig gemischt wurde, um sicherzustellen, dass die richtigen Antworten gleichmäßig auf die Optionen A–D verteilt sind.