LiveCodeBench-CPP

LiveCodeBench-CPP est un ensemble de données d'évaluation pour la génération de code C++, publié par NVIDIA en 2025, conçu pour fournir aux grands modèles de langage une référence d'évaluation de la génération et du débogage de code basée sur les problèmes de programmation les plus récents.

Cet ensemble de données comprend 454 problèmes de programmation, provenant principalement d'AtCoder (287 problèmes) et de LeetCode (167 problèmes), couvrant les concours et problèmes d'octobre 2024 à mai 2025. Les données incluent les descriptions des problèmes, la source de la plateforme, la difficulté, les cas de test et les métadonnées associées, et sont principalement utilisées pour évaluer la capacité des modèles à générer du code et à résoudre des problèmes dans des tâches de programmation réelles.

Composition de l'ensemble de données

• question_title : titre du problème de programmation.
• question_content : description du problème.
• platform : plateforme source du problème, incluant AtCoder et LeetCode.
• question_id : identifiant unique du problème.
• contest_id : identifiant unique du concours.
• contest_date : date du concours.
• starter_code : modèle de code ou signature de fonction.
• difficulty : difficulté du problème.
• public_test_cases : cas de test publics.
• private_test_cases : cas de test privés.
• metadata : métadonnées liées au problème.