DataLearner 标志

CodeLLaMA-13B 评测详情

CodeLLaMA-13B 当前已收录的代表性评测结果包括 MBPP pass@100(3 / 13,得分 87.10)、MBPP pass@10(5 / 13,得分 71.70)、HumanEval pass@100(9 / 21,得分 89.80)。

评测结果

CodeLLaMA-13B

评测结果

思考模式

编程与软件工程

共 2 项评测
评测名称 / 模式
得分
排名/总数
MBPP
常规模式
47
50 / 70
HumanEval
常规模式
36
67 / 101

代码能力

共 4 项评测
评测名称 / 模式
得分
排名/总数
HumanEval pass@100
常规模式
89.80
9 / 21
MBPP pass@100
常规模式
87.10
3 / 13
MBPP pass@10
常规模式
71.70
5 / 13
HumanEval pass@10
常规模式
69.40
9 / 18