查看 MBPP pass@10 的最新得分、模型模式、发布时间与参数规模,快速了解当前完整榜单表现。
数据优先来自官方发布(GitHub、Hugging Face、论文),其次为评测基准官方结果,最后为第三方评测机构数据。 了解数据收集方法
| 排名 | 模型 | 开源情况 | |||
|---|---|---|---|---|---|
76.40 | 2023-08-24 | 340亿 | 免费商用 | ||
![]() CodeLLaMA-34B 常规模式 | 76.20 | 2023-08-24 | 340亿 | 免费商用 | |
74.60 | 2023-08-24 | 340亿 | 免费商用 | ||
4 | 74.00 | 2023-08-24 | 130亿 | 免费商用 | |
5 | ![]() CodeLLaMA-13B 常规模式 | 71.70 | 2023-08-24 | 130亿 | 免费商用 |
6 | 71.20 | 2023-08-24 | 130亿 | 免费商用 | |
7 | 70.30 | 2023-08-24 | 70亿 | 免费商用 | |
8 | ![]() CodeLLaMA-7B 常规模式 | 66.70 | 2023-08-24 | 70亿 | 免费商用 |
9 | ![]() LLaMA2 70B 常规模式 | 66.20 | 2023-07-18 | 700亿 | 免费商用 |
10 | 65.40 | 2023-08-24 | 70亿 | 免费商用 | |
11 | ![]() LLaMA2 34B 常规模式 | 56.90 | 2023-07-18 | 340亿 | 免费商用 |
12 | ![]() LLaMA2 13B 常规模式 | 48.10 | 2023-07-18 | 130亿 | 免费商用 |
13 | ![]() LLaMA2 7B 常规模式 | 41.80 | 2023-07-18 | 70亿 | 免费商用 |