Code Generation On Concode
评估指标
BLEU
CodeBLEU
Exact Match
评测结果
各个模型在此基准测试上的表现结果
比较表格
模型名称 | BLEU | CodeBLEU | Exact Match |
---|---|---|---|
retrieval-augmented-code-generation-and | 42.5 | 43.4 | 23.4 |
codet5-identifier-aware-unified-pre-trained | 41.48 | 44.10 | 22.70 |
各个模型在此基准测试上的表现结果
模型名称 | BLEU | CodeBLEU | Exact Match |
---|---|---|---|
retrieval-augmented-code-generation-and | 42.5 | 43.4 | 23.4 |
codet5-identifier-aware-unified-pre-trained | 41.48 | 44.10 | 22.70 |