Command Palette
Search for a command to run...
Pass@1
Datum
Pass Rate at 1 Sample (Pass@1) ist eine wichtige Bewertungsmetrik für mathematische und logische Inferenzaufgaben im Bereich großer Modelle und Inferenz. Sie misst den Anteil der korrekten Antworten bei einer einzelnen Stichprobenziehung und spiegelt die zuverlässige Genauigkeit des Modells in deterministischen Inferenzszenarien wider, was näher an den tatsächlichen Nutzungspraktiken bei Einzelantworten im Einsatz liegt als Pass@k. Üblicherweise wird diese Metrik als Prozentwert oder als Wert zwischen 0 und 1 berichtet. Sie wird in entsprechenden Benchmarks und Publikationen häufig verwendet und kann die Leistung des Modells in dieser Dimension effektiv widerspiegeln. Höhere Werte sind besser.
KI mit KI entwickeln
Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.