DataLearner 标志

CodeLLaMA-7B 评测详情

CodeLLaMA-7B 当前已收录的代表性评测结果包括 MBPP pass@10(8 / 13,得分 66.70)、HumanEval pass@10(12 / 18,得分 59.60)、MBPP pass@100(9 / 13,得分 82.50)。

评测结果

CodeLLaMA-7B

评测结果

思考模式

编程与软件工程

共 2 项评测
评测名称 / 模式
得分
排名/总数
MBPP
常规模式
41.40
56 / 70
HumanEval
常规模式
33.50
76 / 101

代码能力

共 4 项评测
评测名称 / 模式
得分
排名/总数
HumanEval pass@100
常规模式
85.90
16 / 21
MBPP pass@100
常规模式
82.50
9 / 13
MBPP pass@10
常规模式
66.70
8 / 13
HumanEval pass@10
常规模式
59.60
12 / 18