CS-Eval est un ensemble d'évaluation des capacités de sécurité des réseaux à grande échelle établi conjointement par Alibaba Security, l'Université Fudan et l'Université de l'Académie chinoise des sciences. L'ensemble de données couvre 11 domaines majeurs de la sécurité des réseaux, 42 sous-domaines et 4 369 questions à choix multiples, questions vrai ou faux et questions d'extraction de connaissances. Il fournit des tâches d'évaluation complètes basées sur les connaissances et la pratique, prend en charge l'auto-évaluation des utilisateurs et fournit une référence et une inspiration pour la mise en œuvre de modèles à grande échelle dans la sécurité des réseaux.

Citation

@inproceedings{Yu2024CSEvalAC,
title={CS-Eval: A Comprehensive Large Language Model Benchmark for CyberSecurity},
author={Zhengmin Yu and Jiutian Zeng and Siyi Chen and Wenhan Xu and Dandan Xu and Xiangyu Liu and Zonghao Ying and Nan Wang and Yuan Zhang and Min Yang},
year={2024},
url={https://api.semanticscholar.org/CorpusID:274234403}
}