HyperAI
Command Palette
Search for a command to run...
Self-Consistency Score는 대규모 언어 모델 및 추론 분야의 수학적 및 논리적 추론 작업을 위한 중요한 평가 지표입니다. 모델이 여러 번의 응답이나 동등한 표현에서 일관된 결론을 도출하는 비율을 측정하여 논리적 추론 결과의 내부 일관성을 반영합니다. 이 지표가 높을수록 모델의 추론 과정이 더 견고함을 의미합니다. 일반적으로 백분율 또는 0–1 범위의 점수로 보고됩니다. 이 지표는 관련 벤치마크와 논문에서 널리 사용되며, 모델의 해당 차원에서의 성능을 효과적으로 반영합니다. 값이 높을수록 좋습니다. 이는 연구자와 엔지니어가 수학적 및 논리적 추론 시나리오에서 모델의 실제 성능 차이를 정량화하고, 다양한 방법이나 모델 버전을 수평적으로 비교하는 데 도움이 됩니다.