HyperAIHyperAI

Command Palette

Search for a command to run...

소수 샘플 작업 성공률 Few-Shot Task Pass Rate

날짜

태그

소수 샘플 작업 통과율(Few-Shot Task Pass Rate)은 대규모 언어 모델 및 추론 분야의 프롬프트 엔지니어링 작업에서 중요한 평가 지표입니다. 소수 샘플 프롬프트 하에서 작업을 통과한 비율로, 소수 샘플 프롬프트 능력을 측정합니다. 이는 모델이 소수의 예제에서 작업 패턴을 학습하는 능력을 반영합니다. 일반적으로 백분율 또는 0–1 점수로 보고됩니다. 이 지표는 관련 벤치마크와 논문에서 널리 사용되며, 모델이 해당 차원에서 수행하는 능력을 효과적으로 반영합니다. 수치가 높을수록 좋습니다. 이 지표는 연구자와 엔지니어가 프롬프트 엔지니어링 시나리오에서 모델의 실제 성능 차이를 정량화하고, 다양한 방법이나 모델 버전을 수평적으로 비교하는 데 도움이 됩니다.

AI로 AI 구축

아이디어에서 출시까지 — 무료 AI 코코딩, 즉시 사용 가능한 환경, 최적의 GPU 가격으로 AI 개발을 가속화하세요.

AI 협업 코딩
바로 사용 가능한 GPU
최적의 가격

HyperAI Newsletters

최신 정보 구독하기
한국 시간 매주 월요일 오전 9시 에 이번 주의 최신 업데이트를 메일로 발송합니다
이메일 서비스 제공: MailChimp