Document Haystackは、2025年にAmazon AGIによってリリースされたマルチモーダルドキュメントベンチマークデータセットです。関連する論文の結果は次のとおりです。Document Haystack: 長文コンテキストにおけるマルチモーダル画像/文書理解ビジョン LLM ベンチマーク」は、長いコンテキストの複雑な文書における視覚言語モデル (VLM) の情報検索および理解能力を評価することを目的としています。

このデータセットには、5ページから200ページまでの実際の文書を網羅する400種類の文書バリアントと8,250件の検索質問が含まれています。データ形式には、オリジナルのPDF、200DPIのページ画像、プレーンテキスト解析ファイルなどがあり、質問応答やビジュアル質問応答などのタスクに適しています。