Code Translation On Codexglue Codetrans
평가 지표
Accuracy (C#→Java)
Accuracy (Java→C#)
BLEU (C#→Java)
BLEU (Java→C#)
평가 결과
이 벤치마크에서 각 모델의 성능 결과
비교 표
| 모델 이름 | Accuracy (C#→Java) | Accuracy (Java→C#) | BLEU (C#→Java) | BLEU (Java→C#) |
|---|---|---|---|---|
| codet5-identifier-aware-unified-pre-trained | 66.90 | 65.90 | 79.87 | 84.03 |
| codexglue-a-machine-learning-benchmark | 58 | 59 | 72.14 | 79.92 |