HelpSteer3は、NVIDIAが2025年にリリースした人間の嗜好データセットです。関連する論文の結果は「HelpSteer3-Preference: 多様なタスクと言語にわたる、人間が注釈を付けたオープンな嗜好データ」は、人間からのフィードバックと強化学習技術を通じて、ユーザーのプロンプトに対するモデルの応答性を向上させることを目的としています。

このデータセットには40,476件の選好サンプルが含まれており、それぞれにドメイン、言語、コンテキスト、2つの回答、2つの回答間の総合選好スコア、そして最大3人の注釈者による個人選好スコアが含まれています。多言語データ（中国語、韓国語、フランス語、スペイン語、日本語、ドイツ語、ロシア語、ポルトガル語、イタリア語、ベトナム語、オランダ語）も含まれています。