DataLearner 标志

CodeLLaMA-Instruct-34B 评测详情

CodeLLaMA-Instruct-34B 当前已收录的代表性评测结果包括 HumanEval pass@100(3 / 21,得分 93.50)、HumanEval pass@10(4 / 18,得分 77.20)、MBPP pass@10(3 / 13,得分 74.60)。

评测结果

CodeLLaMA-Instruct-34B

评测结果

思考模式

编程与软件工程

共 2 项评测
评测名称 / 模式
得分
排名/总数
MBPP
常规模式
57
31 / 70
HumanEval
常规模式
41.50
59 / 101

代码能力

共 4 项评测
评测名称 / 模式
得分
排名/总数
HumanEval pass@100
常规模式
93.50
3 / 21
MBPP pass@100
常规模式
85.40
5 / 13
HumanEval pass@10
常规模式
77.20
4 / 18
MBPP pass@10
常规模式
74.60
3 / 13