Code Generation On Conala Ext
Métriques
BLEU
Résultats
Résultats de performance de divers modèles sur ce benchmark
Tableau comparatif
| Nom du modèle | BLEU |
|---|---|
| incorporating-external-knowledge-through-pre | 20.37 |
| reading-stackoverflow-encourages-cheating | 34.35 |
| incorporating-external-knowledge-through-pre | 20.54 |
| tranx-a-transition-based-neural-abstract | 18.85 |
| reading-stackoverflow-encourages-cheating | 35.32 |
| reranking-for-neural-semantic-parsing | 19.85 |