HyperAI
Command Palette
Search for a command to run...
Pass@k(Pass Rate at k Samples)는 자연어 처리 분야의 코드 생성 작업에서 중요한 평가 지표입니다. k번 샘플링 생성 중 최소 한 번이 모든 테스트 케이스를 통과할 비율을 측정하며, 모델이 실행 가능하고 기능이 올바른 코드를 생성하는 능력을 반영하고 코드 생성 분야의 핵심 평가 기준입니다. 일반적으로 백분율 또는 0–1 점수로 보고됩니다. 이 지표는 관련 벤치마크와 논문에서 널리 사용되며 모델의 해당 차원 성능을 효과적으로 반영합니다. 숫자가 높을수록 좋습니다.