HyperAI
Command Palette
Search for a command to run...
평균 순위 Mean Rank
날짜
태그
평균 순위(Mean Rank)는 범용 능력 분야에서 지식 그래프 완성 작업의 중요한 평가 지표입니다. 정답 엔터티가 완성 정렬에서 차지하는 평균 순위를 계산하며, 값이 작을수록 모델이 정답 엔터티를 더 앞쪽에 위치시킨다는 뜻입니다. MRR과 상호 보완적이지만 이상치에 해당하는 나쁜 순위에 더 민감하여, 모델이 어려운 샘플에서 보이는 부족함을 드러낼 수 있습니다. 단위는 rank입니다. 이 지표는 관련 벤치마크와 논문에서 널리 사용되며 해당 차원에서 모델의 성능을 효과적으로 반영합니다. 값이 낮을수록 좋습니다. 연구자와 엔지니어가 지식 그래프 완성 시나리오에서 모델의 실제 성능 차이를 정량화하고, 서로 다른 방법이나 모델 버전을 가로로 비교하는 데 도움을 줍니다.