HyperAIHyperAI

Command Palette

Search for a command to run...

테스트 스위트 통과율

날짜

테스트 스위트 통과율(Test Suite Pass Rate)은 소프트웨어 공학과 코드 대규모 언어 모델(Code LLM) 평가의 핵심 지표로, 코드 생성 및 자동 프로그램 복구(APR) 같은 작업의 성능을 측정하는 데 자주 사용됩니다. 이 지표는 코드가 사전 설정된 테스트 스위트를 실행할 때 성공적으로 통과한 테스트 케이스가 전체 테스트 케이스에서 차지하는 비율을 집계하며(일부 벤치마크에서는 전체 테스트를 모두 통과한 작업의 비율을 집계하는 데에도 사용됨), 이를 통해 생성 또는 복구된 해결책의 기능적 완전성과 정확성을 종합적으로 평가합니다. 이 지표는 일반적으로 백분율 또는 0–10\text{–}10–1의 값 형식으로 보고되며, 값이 높을수록 코드의 사용 가능 수준이 강함을 나타내며, 개발자와 연구자가 다른 모델 버전의 실제 효과를 비교하기 쉽습니다.

AI로 AI 구축

아이디어에서 출시까지 — 무료 AI 코코딩, 즉시 사용 가능한 환경, 최적의 GPU 가격으로 AI 개발을 가속화하세요.

AI 협업 코딩
바로 사용 가능한 GPU
최적의 가격

HyperAI Newsletters

최신 정보 구독하기
한국 시간 매주 월요일 오전 9시 에 이번 주의 최신 업데이트를 메일로 발송합니다
이메일 서비스 제공: MailChimp