Code Generation On Conala Ext
평가 지표
BLEU
평가 결과
이 벤치마크에서 각 모델의 성능 결과
비교 표
| 모델 이름 | BLEU |
|---|---|
| incorporating-external-knowledge-through-pre | 20.37 |
| reading-stackoverflow-encourages-cheating | 34.35 |
| incorporating-external-knowledge-through-pre | 20.54 |
| tranx-a-transition-based-neural-abstract | 18.85 |
| reading-stackoverflow-encourages-cheating | 35.32 |
| reranking-for-neural-semantic-parsing | 19.85 |