HyperAI
Command Palette
Search for a command to run...
Pass@k(Pass Rate at k Samples)是自然语言处理领域中代码生成任务的重要评估指标。衡量在 k 次采样生成中至少有一次能通过全部测试用例的比例,反映模型生成可执行且功能正确代码的能力,是代码生成领域的核心评估标准。通常以百分比或 0–1 分数报告。该指标在相关基准和论文中被广泛使用,能有效反映模型在该维度的表现。数值越高越好。
Search for a command to run...
Pass@k(Pass Rate at k Samples)是自然语言处理领域中代码生成任务的重要评估指标。衡量在 k 次采样生成中至少有一次能通过全部测试用例的比例,反映模型生成可执行且功能正确代码的能力,是代码生成领域的核心评估标准。通常以百分比或 0–1 分数报告。该指标在相关基准和论文中被广泛使用,能有效反映模型在该维度的表现。数值越高越好。