HyperAI
Command Palette
Search for a command to run...
テストスイート正確率(Test Suite Accuracy、略称 TS Acc) は、自然言語処理分野における自然言語から SQL へのタスクの重要な評価指標です。テストスイート正確率は、複数の判別用データベースで SQL の意味的等価性を検証するため、実行正確率よりも頑健です。通常、パーセンテージまたは 0~1 のスコアで報告されます。この指標は関連するベンチマークや論文で広く使用されており、その観点でのモデルの性能を効果的に反映します。数値が高いほど優れています。これにより、研究者やエンジニアは自然言語から SQL へのシナリオにおけるモデルの実性能の差異を定量化でき、異なる手法やモデルバージョンを横断的に比較しやすくなります。