DeepSeek-AI · 2024-12-26
OpenAI · 2024-11-20
DeepSeek-V3 在共同评测平均分中领先
7 项共同评测中领先 4 项，平均分高 5.2 分
仅基于所有选中模型共同有成绩的 7 项百分制评测汇总，明细见下方图表。
“最佳可用”会为每项评测选取该模型已收录的按指标方向选出的最佳非并行结果，可能组合成并不存在的虚拟运行配置；请结合模式明细解读。
| DeepSeek-V3 | GPT-4o(2024-11-20) | |
|---|---|---|
| 发布时间 | 2024-12-26 |
按评测基准逐项对比；切换思考模式或工具设置后，下方图表与表格同步更新。
“最佳可用”按每项评测分别选择按指标方向选出的最佳非并行结果，因此这条系列可能由多个推理档拼接而成，并不代表一个可直接复现的单一运行配置。切换模式筛选可查看可复现的同档结果。
数据优先来自官方发布（GitHub、Hugging Face、论文），其次为评测基准官方结果，最后为第三方评测机构数据。 了解数据收集方法
每条轴是该评测领域内百分制成绩的算术平均，反映的是这些评测的平均得分，不是模型能力评级。
相对优势: 程序生成与编辑 +14.5 / 相对落后: 事实可靠性与幻觉 -13.9
相对优势: 事实可靠性与幻觉 +13.9 / 相对落后: 程序生成与编辑 -14.5
计算口径：同一模型在同一 benchmark 下先平均当前模式范围内的所有分数（不取最高分），再按评测领域对这些分数求平均。只纳入至少两个模型有百分制成绩的评测；Codeforces、Arena 等 Elo/评分制评测已排除，因为把 1500 分的 Elo 与 85% 的准确率放在一起平均不具意义。缺项不按 0 分处理；各评测等权，未按难度加权，因此包含高难度评测的领域分数天然偏低。
7 项评测有两款及以上模型的成绩，按领域分组；每格为该模型在当前筛选下的最佳成绩。
| 评测基准 | DeepSeek-V3 | GPT-4o(2024-11-20) | 差距 |
|---|---|---|---|
MMLU Accuracy | DeepSeek-V388.50常规模式 | GPT-4o(2024-11-20)85.70常规模式 | +2.8 |
MMLU-Pro Accuracy | DeepSeek-V375.90常规模式 | GPT-4o(2024-11-20)77.90常规模式 | +2.0 |
FrontierMath Accuracy | DeepSeek-V31.70常规模式 | GPT-4o(2024-11-20)0.30常规模式 | +1.4 |
MATH Accuracy | DeepSeek-V387.80常规模式 | GPT-4o(2024-11-20)68.50常规模式 | +19.3 |
HumanEval Accuracy | DeepSeek-V389.00常规模式 | GPT-4o(2024-11-20)90.20常规模式 | +1.2 |
Aider-Polyglot Accuracy | DeepSeek-V348.40常规模式 | GPT-4o(2024-11-20)18.20常规模式 | +30.2 |
SimpleQA Accuracy | DeepSeek-V324.90常规模式 | GPT-4o(2024-11-20)38.80常规模式 | +13.9 |
各模型 API 的官方标价，按输入 / 输出分列；单位为美元 / 百万 tokens。
| 计费项 | DeepSeek-V3 | GPT-4o(2024-11-20) |
|---|---|---|
| 标准价格文本输入 | DeepSeek-V3 $0.270最低 | GPT-4o(2024-11-20) $2.50 |
| 文本输出 | DeepSeek-V3 $1.10最低 | GPT-4o(2024-11-20) $10.0 |
| 缓存价格缓存读取 | DeepSeek-V3 $0.070最低 | GPT-4o(2024-11-20) $1.25 |
| 缓存写入 | DeepSeek-V3 $0.270 | GPT-4o(2024-11-20)— |
单位：美元 / 百万 tokens · 数据源：DataLearner AI
架构、许可与 API 模态等规格对比；「未提供」表示数据库暂无该字段。
| 功能与规格 | DeepSeek-V3DeepSeek-AI | GPT-4o(2024-11-20)OpenAI |
|---|---|---|
| 核心规格 | ||
| 发布时间 | 2024-12-26 | 2024-11-20 |
| 上下文长度 | 128K | 128K |
| 总参数量 | 681B | — |
| 最大输出长度 | 未提供 | 16,384 tokens |
| 模型架构 | 稠密（Dense） | 未公布 |
| 可用性与许可 | ||
| 代码可用性 | 可获取 · MIT License | 未公开 |
| 权重可用性 | 可获取 · DEEPSEEK LICENSE AGREEMENT | 未公开 |
| 使用与商业许可 | 免费商用授权 | 仅限官方服务；以服务条款为准 |
| 本地部署 | ||
| 权重体积 | 687.9 GB | 未提供 |
| 权重显存占用 | ≈ 688 GB（仅权重，未含 KV Cache） | 未提供 |
| 权重下载 | Hugging Face | 未提供 |
| 源码仓库 | GitHub | 未提供 |
| API 模态支持 | ||
| 文本 输入/输出 | 输入：支持输出：支持 | 输入：支持输出：支持 |
| 图片 输入/输出 | 输入：不支持输出：不支持 | 输入：支持输出：不支持 |
| 资料来源 | ||
| 论文 / 报告 | Introducing DeepSeek-V3 | 未提供 |
| DataLearner 博客 | 开源大模型的新里程碑：DeepSeek AI开源6510亿参数的DeepSeek V3模型，评测结果显著好于4050亿参数的Llama3.1 405B，比肩Sonnet 3.5的开源模型 | 未提供 |
| 2024-11-20 |
| 上下文长度 | 128K | 128K |
|---|
| 最大输出 | — | 16,384 tokens |
|---|
| 总参数量 | 681B | — |
|---|
| 模型权重 | 开放 | 未开放 |
|---|
