Qw

Qwen2.5-72B

基础大模型

Qwen2.5-72B

发布时间: 2024-09-18 333

模型参数(Parameters)
727.0
最高上下文长度(Context Length)
128K
是否支持中文
支持
推理能力(Reasoning)

模型基本信息

是否支持推理过程

不支持

最高上下文输入长度

128K tokens

最长输出结果
暂无数据
模型类型

基础大模型

发布时间

2024-09-18

模型预文件大小

144GB

开源和体验地址

代码开源状态
预训练权重开源
Qwen License - 免费商用授权
GitHub 源码
Hugging Face
在线体验
暂无在线体验地址

官方介绍与博客

官方论文
DataLearnerAI博客
暂无介绍博客

API接口信息

接口速度(满分5分)
暂无数据
接口价格
输入价格:
  • 文本: 暂无数据
  • 图片: 暂无数据
  • 音频: 暂无数据
  • 视频: 暂无数据
  • Embedding: 暂无数据
输出价格:
  • 文本: 暂无数据
  • 图片: 暂无数据
  • 音频: 暂无数据
  • 视频: 暂无数据
  • Embedding: 暂无数据

输入支持的模态

文本

输入不支持

图片

输入不支持

视频

输入不支持

音频

输入不支持

Embedding(向量)

输入不支持

输出支持的模态

文本

输出不支持

图片

输出不支持

视频

输出不支持

音频

输出不支持

Embedding(向量)

输出不支持

Qwen2.5-72B模型在各大评测榜单的评分

评测基准 MMLU
模式 / 类型
normal / 知识问答
评测结果

86.1

评测基准 MMLU Pro
模式 / 类型
normal / 知识问答
评测结果

58.1

评测基准 GSM8K
模式 / 类型
normal / 数学推理
评测结果

91.5

评测基准 HumanEval
模式 / 类型
normal / 代码生成
评测结果

59.1

评测基准 MBPP
模式 / 类型
normal / 代码生成
评测结果

84.7

评测基准 TruthfulQA
模式 / 类型
normal / 真实性评估
评测结果

60.4

评测基准 MATH
模式 / 类型
normal / 数学推理
评测结果

62.1

评测基准 BBH
模式 / 类型
normal / 综合评估
评测结果

86.3

评测基准 GPQA Diamond
模式 / 类型
normal / 常识推理
评测结果

45.9

发布机构

模型介绍

阿里开源的Qwen2.5系列模型中参数量最大的一个版本,720亿参数规模。其评测效果超过了MetaAI开源的同等参数规模的Llama-3-70B。产品月活低于1亿的商业应用是免费的。


720亿参数规模的Qwen2.5包含了多个版本,除了基座版本外,官方也开源了量化版本以及不同的指令微调版本,其结果如下:


Qwen2.5-72B版本版本简介HuggingFace开源地址
Qwen2.5-72B720亿参数规模的基座版本 https://huggingface.co/Qwen/Qwen2.5-72B 
Qwen2.5-72B-Instruct指令微调版本 https://huggingface.co/Qwen/Qwen2.5-72B-Instruct 

Qwen2.5-72B-Instruct-AWQ
AWQ的4bit量化版本的指令微调Qwen2.5 https://huggingface.co/Qwen/Qwen2.5-72B-Instruct-AWQ 
Qwen2.5-72B-Instruct-GPTQGPTQ量化版本的指令微调Qwen2.5,包含不同的量化水平Int8: https://huggingface.co/Qwen/Qwen2.5-72B-Instruct-GPTQ-Int8
Int4: https://huggingface.co/Qwen/Qwen2.5-72B-Instruct-GPTQ-Int4
Qwen2.5-72B-Instruct-GGUFGGUF量化格式版本 https://huggingface.co/Qwen/Qwen2.5-72B-Instruct-GGUF 


关注DataLearnerAI公众号

关注DataLearnerAI微信公众号,接受最新大模型资讯

DataLearnerAI WeChat