IMO-ProofBench 评测基准详情

38

IMO-Bench 是 Google DeepMind 开发的一套基准测试套件,针对国际数学奥林匹克(IMO)水平的数学问题设计,用于评估大型语言模型在数学推理方面的能力。该基准包括三个子基准:AnswerBench、ProofBench 和 GradingBench,涵盖从短答案验证到完整证明生成和评分的全过程。发布于 2025 年 11 月,该基准通过专家审核的问题集,帮助模型实现 IMO 金牌级别的性能,并提供自动评分机制以支持大规模评估。

模型模式说明

不同模式会显著影响成绩,请在对比榜单时留意标签提示。

提示:若某条记录未显示任何标签,即默认是 normal 常规模式。

normal

常规推理:单步推理,不延长思考、也不调用额外工具。

thinking low medium high

Thinking 系列:常规延长思考时间,low/medium/high 代表不同耗时或深度,各厂商叫法不同。

deeper thinking

Deeper thinking:在 Thinking 基础上进一步延长思考链条,通常意味着更多算力与时间。

使用工具 / 联网

允许调用检索、浏览器、代码解释器等外部能力。

parallel_thinking

并行思考:多线程/多代理协同探索再汇总,通常只在厂商内部实验环境中启用、尚未对外开放,因此被视为“作弊”模式。

IMO-ProofBench 大模型得分排行榜

数据来源:DataLearnerAI

IMO-ProofBench详细排名数据表格

默认:仅展示常规/非并行的评测结果,可按需查看并行思考成绩。

默认隐藏并行思考结果。

排名
模型
得分
发布时间
参数(亿)
1
37.6
2025-08-01
未知
IMO-ProofBench得分 37.6
发布时间 2025-08-01
参数(亿) 未知
查看模型详情
2
xAI Logo
Grok 4 deeper_thinking
23.3
2025-07-10
未知
IMO-ProofBench得分 23.3
发布时间 2025-07-10
参数(亿) 未知
查看模型详情
3
OpenAI Logo
OpenAI o3 thinking
20.5
2025-04-16
未知
IMO-ProofBench得分 20.5
发布时间 2025-04-16
参数(亿) 未知
查看模型详情
4
OpenAI Logo
GPT-5 thinking
20.0
2025-08-07
未知
IMO-ProofBench得分 20.0
发布时间 2025-08-07
参数(亿) 未知
查看模型详情
5
xAI Logo
Grok 4 thinking
18.6
2025-07-10
未知
IMO-ProofBench得分 18.6
发布时间 2025-07-10
参数(亿) 未知
查看模型详情
6
Google Deep Mind Logo
Gemini 2.5-Pro thinking
17.6
2025-06-05
未知
IMO-ProofBench得分 17.6
发布时间 2025-06-05
参数(亿) 未知
查看模型详情
7
11.4
2025-04-16
未知
IMO-ProofBench得分 11.4
发布时间 2025-04-16
参数(亿) 未知
查看模型详情
8
7.1
2025-09-05
10000.0
IMO-ProofBench得分 7.1
发布时间 2025-09-05
参数(亿) 10000.0
查看模型详情
9
5.2
2025-09-23
2350.0
IMO-ProofBench得分 5.2
发布时间 2025-09-23
参数(亿) 2350.0
查看模型详情
10
4.8
2025-05-23
未知
IMO-ProofBench得分 4.8
发布时间 2025-05-23
参数(亿) 未知
查看模型详情
11
4.3
2025-03-24
6710.0
IMO-ProofBench得分 4.3
发布时间 2025-03-24
参数(亿) 6710.0
查看模型详情
12
3.8
2025-05-28
6710.0
IMO-ProofBench得分 3.8
发布时间 2025-05-28
参数(亿) 6710.0
查看模型详情
13
Anthropic Logo
Claude Opus 4 thinking
2.9
2025-05-23
未知
IMO-ProofBench得分 2.9
发布时间 2025-05-23
参数(亿) 未知
查看模型详情