MI

Mistral-7B-Instruct-v0.3

聊天大模型Mistral

Mistral-7B-Instruct-v0.3

发布时间: 2024-05-22更新于: 2024-05-23 08:19:44859
在线体验GitHubHugging FaceCompare
模型参数
70亿
上下文长度
4K
中文支持
不支持
推理能力

Mistral-7B-Instruct-v0.3 是由 MistralAI 发布的 AI 模型,发布时间为 2024-05-22,定位为 聊天大模型,参数规模约为 70亿,上下文长度为 4K,模型文件大小约 14GB,采用 Apache 2.0 许可,在 MMLU 上取得 64.20 分。

数据优先来自官方发布(GitHub、Hugging Face、论文),其次为评测基准官方结果,最后为第三方评测机构数据。 了解数据收集方法

Mistral-7B-Instruct-v0.3

模型基本信息

推理过程
不支持
思考模式
不支持思考模式
上下文长度
4K tokens
最大输出长度
暂无数据
模型类型
聊天大模型
输入/输出模态
暂无数据
发布时间
2024-05-22
模型文件大小
14GB
MoE架构
总参数 / 激活参数
70亿 / 不涉及
知识截止
暂无数据
Mistral-7B-Instruct-v0.3

开源和体验地址

代码开源状态
预训练权重开源
Apache 2.0- 免费商用授权
GitHub 源码
暂无GitHub开源地址
在线体验
暂无在线体验地址
Mistral-7B-Instruct-v0.3

官方介绍与博客

官方论文
暂无官方论文
DataLearnerAI博客
暂无介绍博客
Mistral-7B-Instruct-v0.3

API接口信息

接口速度
暂无数据
暂无公开的 API 定价信息。
Mistral-7B-Instruct-v0.3

评测结果

Mistral-7B-Instruct-v0.3 当前已收录的代表性评测结果包括 ARC(3 / 4,得分 60)、GSM8K(22 / 26,得分 36.20)、BBH(17 / 20,得分 56.10)。 本页还汇总了参数规模、上下文长度与 API 价格,便于结合评测结果与部署约束一起判断模型适配度。

思考模式

综合评估

共 4 项评测
评测名称 / 模式
得分
排名/总数
64.20
64 / 65
56.10
17 / 20
30.90
124 / 126
24.70
175 / 179

数学推理

共 2 项评测
评测名称 / 模式
得分
排名/总数
36.20
22 / 26
10.20
41 / 42

编程与软件工程

共 2 项评测
评测名称 / 模式
得分
排名/总数
51.10
26 / 28
29.30
37 / 39

常识推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
60
3 / 4

和其他模型对比

暂时没有为该模型整理的相关对比页面。

想自定义其他组合?打开对比工具

Mistral-7B-Instruct-v0.3

发布机构

Mistral-7B-Instruct-v0.3

模型解读

MistralAI开源的70亿参数规模大语言模型Mistral-7B的v0.3版本,这是基于基座模型进行指令微调得到的。相比较v0.2版本,其主要改进包括三个:

  • 词汇表从32000扩展到32768
  • 支持v3的tokenizer
  • 支持函数调用

从上述改进看,这个版本最大的优化是对函数调用的支持。说明了模型训练过程中应该加入了类似语料,或者是微调阶段使用了相关的数据集。Mistral-7B一直是70亿参数规模大模型中非常优秀的版本。此次v0.3版本支持函数调用更是将70亿参数规模模型往前推动了一大把。

DataLearner 官方微信

欢迎关注 DataLearner 官方微信,获得最新 AI 技术推送

DataLearner 官方微信二维码