HumanEval 评测基准详情

385

模型模式说明

不同模式会显著影响成绩,请在对比榜单时留意标签提示。

提示:若某条记录未显示任何标签,即默认是 normal 常规模式。

normal

常规推理:单步推理,不延长思考、也不调用额外工具。

thinking low medium high

Thinking 系列:常规延长思考时间,low/medium/high 代表不同耗时或深度,各厂商叫法不同。

deeper thinking

Deeper thinking:在 Thinking 基础上进一步延长思考链条,通常意味着更多算力与时间。

使用工具 / 联网

允许调用检索、浏览器、代码解释器等外部能力。

parallel_thinking

并行思考:多线程/多代理协同探索再汇总,通常只在厂商内部实验环境中启用、尚未对外开放,因此被视为“作弊”模式。

HumanEval 大模型得分排行榜

数据来源:DataLearnerAI

HumanEval详细排名数据表格

默认:仅展示常规/非并行的评测结果,可按需查看并行思考成绩。

默认隐藏并行思考结果。

排名
模型
得分
发布时间
参数(亿)
1
97.6
2025-01-31
未知
HumanEval得分 97.6
发布时间 2025-01-31
参数(亿) 未知
查看模型详情
2
93.7
2024-10-22
未知
HumanEval得分 93.7
发布时间 2024-10-22
参数(亿) 未知
查看模型详情
3
92.4
2024-09-12
未知
HumanEval得分 92.4
发布时间 2024-09-12
参数(亿) 未知
查看模型详情
4
92.0
2024-06-21
未知
HumanEval得分 92.0
发布时间 2024-06-21
参数(亿) 未知
查看模型详情
5
91.0
2025-03-10
未知
HumanEval得分 91.0
发布时间 2025-03-10
参数(亿) 未知
查看模型详情
6
90.2
2024-11-20
未知
HumanEval得分 90.2
发布时间 2024-11-20
参数(亿) 未知
查看模型详情
7
90.0
2024-05-13
未知
HumanEval得分 90.0
发布时间 2024-05-13
参数(亿) 未知
查看模型详情
8
89.0
2024-12-03
未知
HumanEval得分 89.0
发布时间 2024-12-03
参数(亿) 未知
查看模型详情
9
89.0
2024-12-26
6810.0
HumanEval得分 89.0
发布时间 2024-12-26
参数(亿) 6810.0
查看模型详情
10
89.0
2024-07-23
4050.0
HumanEval得分 89.0
发布时间 2024-07-23
参数(亿) 4050.0
查看模型详情
11
89.0
2024-02-15
未知
HumanEval得分 89.0
发布时间 2024-02-15
参数(亿) 未知
查看模型详情
12
88.41
2025-03-17
240.0
HumanEval得分 88.41
发布时间 2025-03-17
参数(亿) 240.0
查看模型详情
13
88.4
2024-08-13
2690.0
HumanEval得分 88.4
发布时间 2024-08-13
参数(亿) 2690.0
查看模型详情
14
88.4
2024-12-06
700.0
HumanEval得分 88.4
发布时间 2024-12-06
参数(亿) 700.0
查看模型详情
15
88.4
2024-09-18
320.0
HumanEval得分 88.4
发布时间 2024-09-18
参数(亿) 320.0
查看模型详情
16
88.1
2024-10-22
未知
HumanEval得分 88.1
发布时间 2024-10-22
参数(亿) 未知
查看模型详情
17
87.8
2025-03-12
270.0
HumanEval得分 87.8
发布时间 2025-03-12
参数(亿) 270.0
查看模型详情
18
87.2
2024-07-18
未知
HumanEval得分 87.2
发布时间 2024-07-18
参数(亿) 未知
查看模型详情
19
86.6
2025-01-13
未知
HumanEval得分 86.6
发布时间 2025-01-13
参数(亿) 未知
查看模型详情
20
84.9
2024-03-04
未知
HumanEval得分 84.9
发布时间 2024-03-04
参数(亿) 未知
查看模型详情
21
81.1
2024-05-29
220.0
HumanEval得分 81.1
发布时间 2024-05-29
参数(亿) 220.0
查看模型详情
22
80.5
2024-07-23
700.0
HumanEval得分 80.5
发布时间 2024-07-23
参数(亿) 700.0
查看模型详情
23
74.4
2025-02-27
38.0
HumanEval得分 74.4
发布时间 2025-02-27
参数(亿) 38.0
查看模型详情
24
74.1
2024-03-29
未知
HumanEval得分 74.1
发布时间 2024-03-29
参数(亿) 未知
查看模型详情
25
73.2
2025-01-28
未知
HumanEval得分 73.2
发布时间 2025-01-28
参数(亿) 未知
查看模型详情
26
66.5
2024-07-23
80.0
HumanEval得分 66.5
发布时间 2024-07-23
参数(亿) 80.0
查看模型详情
27
62.2
2025-03-04
320.0
HumanEval得分 62.2
发布时间 2025-03-04
参数(亿) 320.0
查看模型详情
28
59.1
2024-09-18
727.0
HumanEval得分 59.1
发布时间 2024-09-18
参数(亿) 727.0
查看模型详情
29
57.9
2024-09-18
70.0
HumanEval得分 57.9
发布时间 2024-09-18
参数(亿) 70.0
查看模型详情
30
48.1
2025-02-23
160.0
HumanEval得分 48.1
发布时间 2025-02-23
参数(亿) 160.0
查看模型详情
31
42.1
2024-09-18
30.0
HumanEval得分 42.1
发布时间 2024-09-18
参数(亿) 30.0
查看模型详情
32
37.8
2024-06-27
90.0
HumanEval得分 37.8
发布时间 2024-06-27
参数(亿) 90.0
查看模型详情
33
33.5
2024-07-23
80.0
HumanEval得分 33.5
发布时间 2024-07-23
参数(亿) 80.0
查看模型详情
34
29.3
2024-05-22
70.0
HumanEval得分 29.3
发布时间 2024-05-22
参数(亿) 70.0
查看模型详情
35
28.0
2024-09-18
32.0
HumanEval得分 28.0
发布时间 2024-09-18
参数(亿) 32.0
查看模型详情
36
19.0
2025-03-06
325.0
HumanEval得分 19.0
发布时间 2025-03-06
参数(亿) 325.0
查看模型详情