快速查看大模型在各项评测基准上的表现,包括MMLU Pro、HLE、SWE-Bench等多个标准数据集,帮助开发者和用户了解不同大模型在通用知识、编程能力、推理能力等方面的表现。
用户可以选择自定义模型与评测基准进行对比,快速获取不同模型在实际应用中的优劣势。
各个评测基准的详细介绍可见: LLM 评测基准列表与介绍
数据来源:DataLearnerAI
|
排名
|
模型
|
MMLU Pro
|
GPQA Diamond
|
SWE-bench Verified
|
MATH-500
|
AIME 2024
|
LiveCodeBench
|
|---|---|---|---|---|---|---|---|
| 1 |
|
91.04 | 77.30 | 48.90 | 96.40 | 79.20 | 71.00 |
| 2 |
|
87.20 | 69.30 | 未公布 | 96.20 | 78.20 | 64.90 |
| 3 |
|
87.00 | 87.00 | 58.60 | 未公布 | 未公布 | 82.00 |
| 4 |
|
86.00 | 86.40 | 67.20 | 98.80 | 92.00 | 77.10 |
| 5 |
|
85.60 | 83.30 | 69.10 | 98.10 | 91.60 | 75.80 |
| 6 |
|
85.00 | 85.00 | 未公布 | 未公布 | 未公布 | 82.00 |
| 7 |
|
85.00 | 79.90 | 67.80 | 未公布 | 未公布 | 74.10 |
| 8 |
|
85.00 | 81.00 | 57.60 | 98.00 | 91.40 | 73.30 |
| 9 |
|
85.00 | 79.60 | 72.50 | 98.20 | 76.00 | 56.60 |
| 10 |
|
84.60 | 84.50 | 71.30 | 未公布 | 未公布 | 83.10 |
| 11 |
|
84.60 | 79.10 | 64.20 | 98.20 | 91.00 | 72.90 |
| 12 |
|
84.40 | 81.10 | 未公布 | 未公布 | 未公布 | 74.10 |
| 13 |
|
84.40 | 81.10 | 未公布 | 未公布 | 未公布 | 74.10 |
| 14 |
|
84.00 | 71.50 | 49.20 | 97.30 | 79.80 | 65.90 |
| 15 |
|
84.00 | 83.80 | 80.20 | 未公布 | 43.40 | 66.00 |
| 16 |
|
81.40 | 75.00 | 57.60 | 98.10 | 89.40 | 70.70 |
| 17 |
|
81.10 | 70.00 | 56.00 | 96.80 | 86.00 | 65.00 |
| 18 |
|
80.60 | 69.20 | 55.60 | 96.00 | 83.30 | 62.30 |
| 19 |
|
80.60 | 81.40 | 68.10 | 未公布 | 98.70 | 未公布 |
| 20 |
|
80.30 | 60.00 | 未公布 | 90.00 | 63.60 | 52.00 |
| 21 |
|
79.00 | 57.50 | 未公布 | 未公布 | 未公布 | 32.00 |
| 22 |
|
79.00 | 80.10 | 60.10 | 未公布 | 96.60 | 未公布 |
| 23 |
|
76.00 | 58.00 | 未公布 | 91.00 | 79.50 | 未公布 |
| 24 |
|
74.00 | 71.50 | 未公布 | 未公布 | 96.00 | 未公布 |
| 25 |
|
72.90 | 71.10 | 34.40 | 98.00 | 85.70 | 70.70 |
| 26 |
|
72.50 | 62.00 | 未公布 | 97.40 | 79.40 | 61.80 |
| 27 |
|
70.97 | 未公布 | 未公布 | 90.60 | 50.00 | 未公布 |
| 28 |
|
69.10 | 54.80 | 未公布 | 未公布 | 未公布 | 29.00 |
| 29 |
|
未公布 | 81.00 | 79.40 | 未公布 | 未公布 | 未公布 |
| 30 |
|
未公布 | 70.83 | 未公布 | 未公布 | 73.59 | 59.36 |
| 31 |
|
未公布 | 89.40 | 未公布 | 未公布 | 未公布 | 未公布 |
| 32 |
|
未公布 | 70.60 | 40.80 | 95.80 | 60.00 | 未公布 |
| 33 |
|
未公布 | 79.70 | 49.30 | 97.90 | 87.00 | 69.50 |
| 34 |
|
未公布 | 未公布 | 未公布 | 未公布 | 未公布 | 67.40 |
| 35 |
|
未公布 | 65.20 | 未公布 | 94.50 | 未公布 | 未公布 |
| 36 |
|
未公布 | 未公布 | 未公布 | 94.60 | 未公布 | 未公布 |
| 37 |
|
未公布 | 未公布 | 未公布 | 96.20 | 未公布 | 未公布 |
| 38 |
|
未公布 | 66.70 | 27.60 | 未公布 | 未公布 | 34.30 |
| 39 |
|
未公布 | 88.10 | 76.30 | 未公布 | 未公布 | 未公布 |
| 40 |
|
未公布 | 未公布 | 未公布 | 未公布 | 未公布 | 80.40 |
| 41 |
|
未公布 | 84.00 | 75.00 | 未公布 | 93.00 | 未公布 |
| 42 |
|
未公布 | 未公布 | 未公布 | 未公布 | 未公布 | 73.80 |
| 43 |
|
未公布 | 68.18 | 未公布 | 未公布 | 70.68 | 55.84 |
| 44 |
|
未公布 | 84.00 | 未公布 | 未公布 | 96.00 | 未公布 |
| 45 |
|
未公布 | 84.60 | 未公布 | 未公布 | 93.30 | 79.40 |
| 46 |
|
未公布 | 84.80 | 未公布 | 96.20 | 80.00 | 未公布 |
| 47 |
|
未公布 | 49.00 | 未公布 | 90.40 | 50.00 | 未公布 |
| 48 |
|
未公布 | 83.00 | 63.20 | 98.80 | 92.00 | 77.10 |
| 49 |
|
未公布 | 未公布 | 未公布 | 未公布 | 未公布 | 未公布 |
| 50 |
|
未公布 | 68.40 | 未公布 | 97.20 | 81.40 | 65.70 |
| 51 |
|
未公布 | 49.50 | 未公布 | 91.40 | 53.30 | 未公布 |
| 52 |
|
未公布 | 82.80 | 50.00 | 未公布 | 88.00 | 55.40 |
| 53 |
|
未公布 | 84.00 | 63.80 | 未公布 | 92.00 | 70.40 |
| 54 |
|
未公布 | 未公布 | 未公布 | 未公布 | 未公布 | 65.60 |
| 55 |
|
未公布 | 未公布 | 未公布 | 未公布 | 未公布 | 65.90 |