Command Palette
Search for a command to run...
Bestehensrate Der Testsuite
Datum
Die Testsuite-Bestehensrate (Test Suite Pass Rate) ist eine Kernmetrik in der Bewertung von Software-Engineering und Code-Großmodellen (Code LLM) und wird häufig verwendet, um die Leistung bei Aufgaben wie Codegenerierung und automatischer Programmreparatur (APR) zu messen. Diese Metrik misst den Anteil der erfolgreich bestandenen Testfälle an der Gesamtzahl der Testfälle, wenn Code mit einer vordefinierten Testsuite ausgeführt wird (in einigen Benchmarks wird sie auch verwendet, um den Anteil der Aufgaben zu erfassen, die alle Tests vollständig bestehen), um die funktionale Vollständigkeit und Korrektheit von Generierungs- oder Reparaturvorschlägen umfassend zu bewerten. Diese Metrik wird üblicherweise als Prozentwert oder als numerischer Wert im Bereich 0–1 berichtet; je höher der Wert, desto stärker die Nutzbarkeit des Codes, was Entwicklern und Forschern den Vergleich der tatsächlichen Wirksamkeit verschiedener Modellversionen untereinander erleichtert.
KI mit KI entwickeln
Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.