新概念

小説的概念タスクは、モデルが表面的には関連性が低いように見える複数のエンティティ間で潜在的な概念を発見する能力を評価することを目指しています。これらのエンティティは、訓練データでほとんど共起しないことがあります。このタスクでは、モデルの創造的抽象化の能力を評価し、未見の状況に直面した際の理解力と推論力を測定することで、複雑な認知タスクにおける人工知能の進歩を促します。