快速查看大模型在各项评测基准上的表现,包括MMLU Pro、HLE、SWE-Bench等多个标准数据集,帮助开发者和用户了解不同大模型在通用知识、编程能力、推理能力等方面的表现。
用户可以选择自定义模型与评测基准进行对比,快速获取不同模型在实际应用中的优劣势。
各个评测基准的详细介绍可见: LLM 评测基准列表与介绍
数据来源:DataLearnerAI
|
排名
|
模型
|
MMLU Pro
|
GPQA Diamond
|
SWE-bench Verified
|
MATH-500
|
AIME 2024
|
LiveCodeBench
|
|---|---|---|---|---|---|---|---|
| 1 |
|
88.00 | 83.40 | 82.00 | 未公布 | 未公布 | 71.00 |
| 2 |
|
86.10 | 71.40 | 38.00 | 90.70 | 36.70 | 46.40 |
| 3 |
|
85.00 | 80.70 | 68.40 | 未公布 | 未公布 | 80.00 |
| 4 |
|
85.00 | 80.10 | 66.00 | 未公布 | 93.10 | 74.80 |
| 5 |
|
84.00 | 76.00 | 69.60 | 未公布 | 未公布 | 57.50 |
| 6 |
|
83.00 | 82.90 | 68.00 | 未公布 | 未公布 | 84.50 |
| 7 |
|
83.00 | 77.50 | 未公布 | 未公布 | 未公布 | 51.80 |
| 8 |
|
82.60 | 73.70 | 未公布 | 96.80 | 79.20 | 59.60 |
| 9 |
|
82.00 | 78.00 | 69.40 | 未公布 | 未公布 | 83.00 |
| 10 |
|
81.20 | 68.40 | 38.80 | 94.00 | 59.40 | 49.20 |
| 11 |
|
81.10 | 75.10 | 51.80 | 97.40 | 69.60 | 53.70 |
| 12 |
|
80.50 | 66.30 | 54.60 | 92.80 | 48.10 | 40.50 |
| 13 |
|
79.80 | 66.90 | 未公布 | 未公布 | 未公布 | 35.80 |
| 14 |
|
79.10 | 64.70 | 未公布 | 未公布 | 36.00 | 未公布 |
| 15 |
|
79.00 | 未公布 | 未公布 | 92.40 | 81.90 | 67.10 |
| 16 |
|
78.40 | 未公布 | 未公布 | 96.40 | 54.80 | 38.80 |
| 17 |
|
78.40 | 70.40 | 未公布 | 未公布 | 未公布 | 43.20 |
| 18 |
|
78.00 | 65.00 | 49.00 | 78.00 | 16.00 | 38.70 |
| 19 |
|
77.90 | 未公布 | 未公布 | 未公布 | 未公布 | 未公布 |
| 20 |
|
76.10 | 未公布 | 未公布 | 未公布 | 未公布 | 未公布 |
| 21 |
|
75.90 | 59.10 | 未公布 | 87.80 | 39.00 | 34.60 |
| 22 |
|
75.50 | 56.00 | 未公布 | 未公布 | 未公布 | 未公布 |
| 23 |
|
72.40 | 未公布 | 未公布 | 未公布 | 76.40 | 51.80 |
| 24 |
|
71.60 | 51.50 | 未公布 | 未公布 | 未公布 | 28.90 |
| 25 |
|
69.06 | 46.13 | 未公布 | 未公布 | 未公布 | 未公布 |
| 26 |
|
68.90 | 50.50 | 未公布 | 未公布 | 未公布 | 33.30 |
| 27 |
|
67.50 | 42.40 | 未公布 | 未公布 | 25.30 | 29.70 |
| 28 |
|
66.05 | 未公布 | 未公布 | 未公布 | 未公布 | 56.60 |
| 29 |
|
56.33 | 未公布 | 未公布 | 未公布 | 未公布 | 未公布 |
| 30 |
|
56.20 | 未公布 | 未公布 | 未公布 | 未公布 | 未公布 |
| 31 |
|
52.80 | 36.00 | 未公布 | 71.80 | 10.00 | 未公布 |
| 32 |
|
52.78 | 未公布 | 未公布 | 未公布 | 未公布 | 未公布 |
| 33 |
|
51.00 | 35.90 | 未公布 | 未公布 | 未公布 | 未公布 |
| 34 |
|
44.00 | 26.30 | 未公布 | 未公布 | 未公布 | 未公布 |
| 35 |
|
42.40 | 未公布 | 未公布 | 未公布 | 未公布 | 未公布 |
| 36 |
|
30.90 | 24.70 | 未公布 | 未公布 | 未公布 | 未公布 |
| 37 |
|
未公布 | 68.00 | 70.30 | 82.20 | 23.30 | 未公布 |
| 38 |
|
未公布 | 未公布 | 54.00 | 未公布 | 未公布 | 未公布 |
| 39 |
|
未公布 | 85.70 | 未公布 | 未公布 | 未公布 | 80.00 |
| 40 |
|
未公布 | 未公布 | 69.20 | 未公布 | 未公布 | 未公布 |
| 41 |
|
未公布 | 80.40 | 未公布 | 未公布 | 84.20 | 70.60 |
| 42 |
|
未公布 | 50.30 | 未公布 | 未公布 | 29.40 | 未公布 |
| 43 |
|
未公布 | 65.80 | 未公布 | 未公布 | 未公布 | 55.20 |
| 44 |
|
未公布 | 62.00 | 未公布 | 未公布 | 未公布 | 35.10 |
| 45 |
|
未公布 | 60.10 | 未公布 | 93.70 | 81.10 | 57.00 |
| 46 |
|
未公布 | 未公布 | 未公布 | 未公布 | 未公布 | 87.60 |
| 47 |
|
未公布 | 65.00 | 23.60 | 未公布 | 49.60 | 未公布 |
| 48 |
|
未公布 | 88.90 | 73.50 | 未公布 | 未公布 | 未公布 |