DataLearner 标志

PaLM-Coder 评测详情

PaLM-Coder 当前已收录的代表性评测结果包括 HumanEval pass@100(10 / 21,得分 88.40)、HumanEval(68 / 101,得分 35.90)、MBPP(50 / 70,得分 47)。

评测结果

PaLM-Coder

评测结果

思考模式

编程与软件工程

共 2 项评测
评测名称 / 模式
得分
排名/总数
MBPP
常规模式
47
50 / 70
HumanEval
常规模式
35.90
68 / 101

代码能力

共 1 项评测
评测名称 / 模式
得分
排名/总数
HumanEval pass@100
常规模式
88.40
10 / 21