CyberMetric 데이터 세트는 대규모 모델의 사이버 보안 지식을 종합적으로 평가하도록 신중하게 설계된 10,000개의 질문으로 구성되어 있습니다. 이 데이터 세트는 다양한 대규모 모델을 사용하여 만들어졌으며, 사이버 보안 분야의 전문가가 검증하여 관련성과 정확성을 보장했습니다. 원본 데이터는 사이버 보안 분야의 표준, 인증, 연구 논문, 서적 및 기타 출판물에서 나왔습니다. 다양한 연구 요구를 충족하기 위해 데이터 세트는 80개, 500개, 2000개, 10,000개의 질문으로 구성된 소형부터 초대형까지 4가지 크기를 제공합니다.

소환

@INPROCEEDINGS{10679494, 저자={Tihanyi, Norbert 및 Ferrag, Mohamed Amine 및 Jain, Ridhi 및 Bisztray, Tamas 및 Debbah, Merouane}, 책 제목={2024 IEEE 국제 사이버 보안 및 복원력 컨퍼런스(CSR)}, 제목={CyberMetric: 사이버 보안 지식 분야의 LLM 평가를 위한 검색 증강 생성 기반 벤치마크 데이터셋}, 연도={2024}, 볼륨={}, 숫자={}, 페이지={296-302}, 키워드={정확도;리버스 엔지니어링;벤치마크 테스트;NIST 표준;위험 관리;문제 해결;컴퓨터 보안} doi={10.1109/CSR61664.2024.10679494}}