HyperAI
Command Palette
Search for a command to run...
소수 샘플 작업 통과율(Few-Shot Task Pass Rate)은 대규모 언어 모델 및 추론 분야의 프롬프트 엔지니어링 작업에서 중요한 평가 지표입니다. 소수 샘플 프롬프트 하에서 작업을 통과한 비율로, 소수 샘플 프롬프트 능력을 측정합니다. 이는 모델이 소수의 예제에서 작업 패턴을 학습하는 능력을 반영합니다. 일반적으로 백분율 또는 0–1 점수로 보고됩니다. 이 지표는 관련 벤치마크와 논문에서 널리 사용되며, 모델이 해당 차원에서 수행하는 능력을 효과적으로 반영합니다. 수치가 높을수록 좋습니다. 이 지표는 연구자와 엔지니어가 프롬프트 엔지니어링 시나리오에서 모델의 실제 성능 차이를 정량화하고, 다양한 방법이나 모델 버전을 수평적으로 비교하는 데 도움이 됩니다.