s1K データセットは、Fei-Fei Li のチームによって 2025 年にリリースされた高品質の推論データセットです。これには、Google の Gemini Thinking Experimental の抽出結果から得られた 1,000 件の質問とその詳細な推論の軌跡と回答が含まれています。データセットは、確率論、定量的な面接の質問、オリンピックの質問など 50 の異なる分野をカバーしており、モデルがさまざまな種類の推論タスクを処理できることを保証します。関連する論文の結果はs1: 単純なテスト時間のスケーリング”。 このデータセットは、最小限のデータ エンジニアリングを通じて効率的なモデルの微調整を可能にし、推論タスクで優れたパフォーマンスを発揮するように設計されています。

引用

@misc{muennighoff2025s1simpletesttimescaling,
title={s1: Simple test-time scaling},
author={Niklas Muennighoff and Zitong Yang and Weijia Shi and Xiang Lisa Li and Li Fei-Fei and Hannaneh Hajishirzi and Luke Zettlemoyer and Percy Liang and Emmanuel Candès and Tatsunori Hashimoto},
year={2025},
eprint={2501.19393},
archivePrefix={arXiv},
primaryClass={cs.CL},
url={https://arxiv.org/abs/2501.19393},
}