Code Generation On Conala Ext
評価指標
BLEU
評価結果
このベンチマークにおける各モデルのパフォーマンス結果
比較表
| モデル名 | BLEU |
|---|---|
| incorporating-external-knowledge-through-pre | 20.37 |
| reading-stackoverflow-encourages-cheating | 34.35 |
| incorporating-external-knowledge-through-pre | 20.54 |
| tranx-a-transition-based-neural-abstract | 18.85 |
| reading-stackoverflow-encourages-cheating | 35.32 |
| reranking-for-neural-semantic-parsing | 19.85 |