HyperAI
Command Palette
Search for a command to run...
問題解決率(Issue Resolved Rate)は、自然言語処理分野におけるコード自動修復 / エラー修正タスクの重要な評価指標です。モデルが生成したパッチが GitHub issue を関連するテストや人工確認によって正常に解決できる割合を測定し、エンドツーエンドの issue 修正の核心的能力を反映します。通常、パーセンテージまたは 0–1 のスコアで報告されます。この指標は関連するベンチマークや論文で広く使用されており、モデルのこの次元でのパフォーマンスを効果的に反映します。数値が高いほど良いです。