DataLearner 标志

OpenAI o1-mini 评测详情

OpenAI o1-mini 当前已收录的代表性评测结果包括 HumanEval(4 / 39,得分 92.40)、MMLU Pro(62 / 132,得分 80.30)、MMLU(40 / 66,得分 85.20)。

评测结果

OpenAI o1-mini

评测结果

思考模式

综合评估

共 3 项评测
评测名称 / 模式
得分
排名/总数
85.20
40 / 66
80.30
62 / 132
60
146 / 187

编程与软件工程

共 2 项评测
评测名称 / 模式
得分
排名/总数
92.40
4 / 39
52
88 / 123

数学推理

共 4 项评测
评测名称 / 模式
得分
排名/总数
90
37 / 44
63.60
41 / 62
1.70
49 / 60
1.40
51 / 60

常识推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
Simple Bench
常规模式
18.10
61 / 63

Agent能力评测

共 1 项评测
评测名称 / 模式
得分
排名/总数
Aider-Polyglot
常规模式
32.90
43 / 59