Program Synthesis On Spoc Testw
Métriques
Success rate @budget 100
Résultats
Résultats de performance de divers modèles sur ce benchmark
Tableau comparatif
| Nom du modèle | Success rate @budget 100 |
|---|---|
| spoc-search-based-pseudocode-to-code | 53.7 |
| graph-based-self-supervised-program-repair | 57.0 |