Command Palette
Search for a command to run...
LiveCodeBench-CPP
LiveCodeBench-CPP ist ein von NVIDIA im Jahr 2025 veröffentlichter Evaluierungsdatensatz für die C++-Codegenerierung. Er zielt darauf ab, einen Benchmark für die Fähigkeit großer Sprachmodelle zur Codegenerierung und -fehlerbehebung auf Basis aktueller Programmieraufgaben bereitzustellen.
Der Datensatz umfasst 454 Programmieraufgaben, die hauptsächlich von AtCoder (287 Aufgaben) und LeetCode (167 Aufgaben) stammen und Wettbewerbe sowie Aufgaben aus dem Zeitraum von Oktober 2024 bis Mai 2025 abdecken. Die Daten enthalten Aufgabenbeschreibungen, Plattformherkunft, Schwierigkeitsgrad, Testfälle und zugehörige Metadaten. Sie dienen primär der Bewertung der Fähigkeit von Modellen zur Codegenerierung und Problemlösung in realen Programmieraufgaben.
Zusammensetzung des Datensatzes
- question_title: Titel der Programmieraufgabe.
- question_content: Aufgabenbeschreibung.
- platform: Ursprungsplattform der Aufgabe, einschließlich AtCoder und LeetCode.
- question_id: Eindeutige Kennung der Aufgabe.
- contest_id: Eindeutige Kennung des Wettbewerbs.
- contest_date: Datum des Wettbewerbs.
- starter_code: Codevorlage oder Funktionssignatur.
- difficulty: Schwierigkeitsgrad der Aufgabe.
- public_test_cases: Öffentliche Testfälle.
- private_test_cases: Private Testfälle.
- metadata: Metadaten zur Aufgabe.
KI mit KI entwickeln
Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.