大模型评测基准与性能对比

快速查看大模型在各项评测基准上的表现,包括MMLU Pro、HLE、SWE-Bench等多个标准数据集,帮助开发者和用户了解不同大模型在通用知识、编程能力、推理能力等方面的表现。

用户可以选择自定义模型与评测基准进行对比,快速获取不同模型在实际应用中的优劣势。

各个评测基准的详细介绍可见: LLM 评测基准列表与介绍

大模型性能评测结果

数据来源:DataLearnerAI

筛选条件

大模型排名数据表格

排名
模型
MMLU Pro
GPQA Diamond
SWE-bench Verified
MATH-500
AIME 2024
LiveCodeBench
参数(亿)
开源情况
1 Anthropic Logo 88.00 83.40 82.00 未公布 未公布 71.00 未知 不开源
2 OpenAI Logo 86.10 71.40 38.00 90.70 36.70 46.40 未知 不开源
3 DeepSeek-AI Logo 85.00 80.70 68.40 未公布 未公布 80.00 6,710 免费商用授权
4 DeepSeek-AI Logo 85.00 80.10 66.00 未公布 93.10 74.80 6,710 免费商用授权
5 阿里巴巴 Logo 84.00 76.00 69.60 未公布 未公布 57.50 未知 不开源
6 智谱AI Logo 83.00 82.90 68.00 未公布 未公布 84.50 3,550 免费商用授权
7 阿里巴巴 Logo 83.00 77.50 未公布 未公布 未公布 51.80 2,350 免费商用授权
8 华为 Logo 82.60 73.70 未公布 96.80 79.20 59.60 719 免费商用授权
9 MiniMaxAI Logo 82.00 78.00 69.40 未公布 未公布 83.00 2,300 免费商用授权
10 DeepSeek-AI Logo 81.20 68.40 38.80 94.00 59.40 49.20 6,710 免费商用授权
11 Moonshot AI Logo 81.10 75.10 51.80 97.40 69.60 53.70 10,000 免费商用授权
12 OpenAI Logo 80.50 66.30 54.60 92.80 48.10 40.50 未知 不开源
13 OpenAI Logo 79.80 66.90 未公布 未公布 未公布 35.80 未知 不开源
14 DeepMind Logo 79.10 64.70 未公布 未公布 36.00 未公布 未知 不开源
15 华为 Logo 79.00 未公布 未公布 92.40 81.90 67.10 70 免费商用授权
16 百度 Logo 78.40 未公布 未公布 96.40 54.80 38.80 3,000 免费商用授权
17 阿里巴巴 Logo 78.40 70.40 未公布 未公布 未公布 43.20 305 免费商用授权
18 Anthropic Logo 78.00 65.00 49.00 78.00 16.00 38.70 未知 不开源
19 OpenAI Logo 77.90 未公布 未公布 未公布 未公布 未公布 未知 不开源
20 阿里巴巴 Logo 76.10 未公布 未公布 未公布 未公布 未公布 未知 不开源
21 DeepSeek-AI Logo 75.90 59.10 未公布 87.80 39.00 34.60 6,810 免费商用授权
22 xAI Logo 75.50 56.00 未公布 未公布 未公布 未公布 2,690 免费商用授权
23 智谱AI Logo 72.40 未公布 未公布 未公布 76.40 51.80 90 免费商用授权
24 DeepMind Logo 71.60 51.50 未公布 未公布 未公布 28.90 未知 不开源
25 MistralAI Logo 69.06 46.13 未公布 未公布 未公布 未公布 240 免费商用授权
26 Facebook AI研究实验室 Logo 68.90 50.50 未公布 未公布 未公布 33.30 700 免费商用授权
27 Google Deep Mind Logo 67.50 42.40 未公布 未公布 25.30 29.70 270 免费商用授权
28 阿里巴巴 Logo 66.05 未公布 未公布 未公布 未公布 56.60 800 免费商用授权
29 MistralAI Logo 56.33 未公布 未公布 未公布 未公布 未公布 1,410 免费商用授权
30 Facebook AI研究实验室 Logo 56.20 未公布 未公布 未公布 未公布 未公布 700 免费商用授权
31 Microsoft Logo 52.80 36.00 未公布 71.80 10.00 未公布 38 免费商用授权
32 Facebook AI研究实验室 Logo 52.78 未公布 未公布 未公布 未公布 未公布 700 免费商用授权
33 xAI Logo 51.00 35.90 未公布 未公布 未公布 未公布 未知 不开源
34 Facebook AI研究实验室 Logo 44.00 26.30 未公布 未公布 未公布 未公布 80 免费商用授权
35 Moonshot AI Logo 42.40 未公布 未公布 未公布 未公布 未公布 160 免费商用授权
36 MistralAI Logo 30.90 24.70 未公布 未公布 未公布 未公布 70 免费商用授权
37 Anthropic Logo 未公布 68.00 70.30 82.20 23.30 未公布 未知 不开源
38 Google Deep Mind Logo 未公布 未公布 54.00 未公布 未公布 未公布 未知 不开源
39 xAI Logo 未公布 85.70 未公布 未公布 未公布 80.00 未知 不开源
40 Moonshot AI Logo 未公布 未公布 69.20 未公布 未公布 未公布 10,000 免费商用授权
41 xAI Logo 未公布 80.40 未公布 未公布 84.20 70.60 未知 不开源
42 OpenAI Logo 未公布 50.30 未公布 未公布 29.40 未公布 未知 不开源
43 阿里巴巴 Logo 未公布 65.80 未公布 未公布 未公布 55.20 40 免费商用授权
44 阿里巴巴 Logo 未公布 62.00 未公布 未公布 未公布 35.10 40 免费商用授权
45 Tencent ARC Logo 未公布 60.10 未公布 93.70 81.10 57.00 70 免费商用授权
46 Google Deep Mind Logo 未公布 未公布 未公布 未公布 未公布 87.60 未知 不开源
47 OpenAI Logo 未公布 65.00 23.60 未公布 49.60 未公布 未知 不开源
48 xAI Logo 未公布 88.90 73.50 未公布 未公布 未公布 未知 不开源
MMLU Pro (综合评估) 88.00
GPQA Diamond (综合评估) 83.40
SWE-bench Verified (编程与软件工程) 82.00
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 71.00
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 86.10
GPQA Diamond (综合评估) 71.40
SWE-bench Verified (编程与软件工程) 38.00
MATH-500 (数学推理) 90.70
AIME 2024 (数学推理) 36.70
LiveCodeBench (编程与软件工程) 46.40
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 85.00
GPQA Diamond (综合评估) 80.70
SWE-bench Verified (编程与软件工程) 68.40
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 80.00
参数(亿) 6,710
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 85.00
GPQA Diamond (综合评估) 80.10
SWE-bench Verified (编程与软件工程) 66.00
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 93.10
LiveCodeBench (编程与软件工程) 74.80
参数(亿) 6,710
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 84.00
GPQA Diamond (综合评估) 76.00
SWE-bench Verified (编程与软件工程) 69.60
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 57.50
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 83.00
GPQA Diamond (综合评估) 82.90
SWE-bench Verified (编程与软件工程) 68.00
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 84.50
参数(亿) 3,550
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 83.00
GPQA Diamond (综合评估) 77.50
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 51.80
参数(亿) 2,350
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 82.60
GPQA Diamond (综合评估) 73.70
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 96.80
AIME 2024 (数学推理) 79.20
LiveCodeBench (编程与软件工程) 59.60
参数(亿) 719
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 82.00
GPQA Diamond (综合评估) 78.00
SWE-bench Verified (编程与软件工程) 69.40
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 83.00
参数(亿) 2,300
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 81.20
GPQA Diamond (综合评估) 68.40
SWE-bench Verified (编程与软件工程) 38.80
MATH-500 (数学推理) 94.00
AIME 2024 (数学推理) 59.40
LiveCodeBench (编程与软件工程) 49.20
参数(亿) 6,710
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 81.10
GPQA Diamond (综合评估) 75.10
SWE-bench Verified (编程与软件工程) 51.80
MATH-500 (数学推理) 97.40
AIME 2024 (数学推理) 69.60
LiveCodeBench (编程与软件工程) 53.70
参数(亿) 10,000
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 80.50
GPQA Diamond (综合评估) 66.30
SWE-bench Verified (编程与软件工程) 54.60
MATH-500 (数学推理) 92.80
AIME 2024 (数学推理) 48.10
LiveCodeBench (编程与软件工程) 40.50
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 79.80
GPQA Diamond (综合评估) 66.90
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 35.80
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 79.10
GPQA Diamond (综合评估) 64.70
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 36.00
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 79.00
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 92.40
AIME 2024 (数学推理) 81.90
LiveCodeBench (编程与软件工程) 67.10
参数(亿) 70
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 78.40
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 96.40
AIME 2024 (数学推理) 54.80
LiveCodeBench (编程与软件工程) 38.80
参数(亿) 3,000
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 78.40
GPQA Diamond (综合评估) 70.40
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 43.20
参数(亿) 305
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 78.00
GPQA Diamond (综合评估) 65.00
SWE-bench Verified (编程与软件工程) 49.00
MATH-500 (数学推理) 78.00
AIME 2024 (数学推理) 16.00
LiveCodeBench (编程与软件工程) 38.70
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 77.90
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 76.10
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 75.90
GPQA Diamond (综合评估) 59.10
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 87.80
AIME 2024 (数学推理) 39.00
LiveCodeBench (编程与软件工程) 34.60
参数(亿) 6,810
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 75.50
GPQA Diamond (综合评估) 56.00
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 2,690
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 72.40
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 76.40
LiveCodeBench (编程与软件工程) 51.80
参数(亿) 90
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 71.60
GPQA Diamond (综合评估) 51.50
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 28.90
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 69.06
GPQA Diamond (综合评估) 46.13
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 240
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 68.90
GPQA Diamond (综合评估) 50.50
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 33.30
参数(亿) 700
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 67.50
GPQA Diamond (综合评估) 42.40
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 25.30
LiveCodeBench (编程与软件工程) 29.70
参数(亿) 270
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 66.05
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 56.60
参数(亿) 800
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 56.33
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 1,410
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 56.20
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 700
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 52.80
GPQA Diamond (综合评估) 36.00
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 71.80
AIME 2024 (数学推理) 10.00
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 38
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 52.78
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 700
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 51.00
GPQA Diamond (综合评估) 35.90
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 44.00
GPQA Diamond (综合评估) 26.30
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 80
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 42.40
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 160
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 30.90
GPQA Diamond (综合评估) 24.70
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 70
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 68.00
SWE-bench Verified (编程与软件工程) 70.30
MATH-500 (数学推理) 82.20
AIME 2024 (数学推理) 23.30
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 54.00
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 85.70
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 80.00
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 69.20
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 10,000
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 80.40
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 84.20
LiveCodeBench (编程与软件工程) 70.60
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 50.30
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 29.40
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 65.80
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 55.20
参数(亿) 40
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 62.00
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 35.10
参数(亿) 40
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 60.10
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 93.70
AIME 2024 (数学推理) 81.10
LiveCodeBench (编程与软件工程) 57.00
参数(亿) 70
开源情况 免费商用授权
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 未公布
SWE-bench Verified (编程与软件工程) 未公布
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 87.60
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 65.00
SWE-bench Verified (编程与软件工程) 23.60
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 49.60
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情
MMLU Pro (综合评估) 未公布
GPQA Diamond (综合评估) 88.90
SWE-bench Verified (编程与软件工程) 73.50
MATH-500 (数学推理) 未公布
AIME 2024 (数学推理) 未公布
LiveCodeBench (编程与软件工程) 未公布
参数(亿) 未知
开源情况 不开源
查看模型详情