DataLearner 标志
MP

MPT-30B-Chat

聊天大模型

MosaicML Pretrained Transformer - 30B Chat

发布时间: 2023-06-22更新于: 2023-06-23 20:55:50.882175
模型参数
300亿
上下文长度
8K
中文支持
不支持
推理能力

MosaicML Pretrained Transformer - 30B Chat 是由 MosaicML 发布的 AI 模型,发布时间为 2023-06-22,定位为 聊天大模型,参数规模约为 300亿,上下文长度为 8K,模型文件大小约 60GB,采用 CC-BY-NC 4.0 许可。

数据优先来自官方发布(GitHub、Hugging Face、论文),其次为评测基准官方结果,最后为第三方评测机构数据。 了解数据收集方法

MPT-30B-Chat

模型基本信息

推理过程
不支持
思考模式
不支持思考模式
上下文长度
8K tokens
最大输出长度
暂无数据
模型类型
聊天大模型
输入/输出模态
暂无数据
发布时间
2023-06-22
模型文件大小
60GB
MoE架构
总参数 / 激活参数
300亿 / 不涉及
知识截止
暂无数据
MPT-30B-Chat

开源和体验地址

代码开源状态
预训练权重开源
CC-BY-NC 4.0- 不可商用
在线体验
暂无在线体验地址
MPT-30B-Chat

官方介绍与博客

DataLearnerAI博客
暂无介绍博客
MPT-30B-Chat

API接口信息

接口速度
暂无数据
暂无公开的 API 定价信息。
MPT-30B-Chat

评测结果

当前尚无可展示的评测数据。

和其他模型对比

暂时没有为该模型整理的相关对比页面。

想自定义其他组合?打开对比工具

MPT-30B-Chat

发布机构

MosaicML Pretrained Transformer - 30B Chat

模型解读

MPT-30B-Chat是MosaicML开源的MPT-30B系列中针对聊天和对话进行微调的大模型。该模型代码依然采用Apache 2.0开源协议开源,但是其预训练结果却是CC BY-NC-SA-4.0协议,不允许商用


MPT-30B是MosaicML训练的300亿参数规模的大模型,其基础模型相比较7B版本有了很大的改进,在效果和训练推理效率上都有很大的提升。


MPT-30B-Chat是一个用于生成对话的类似聊天机器人的模型。它是通过在ShareGPT-Vicuna、Camel-AI、GPTeacher、Guanaco、Baize和一些生成的数据集上对MPT-30B进行微调建立的。

基础模型

DataLearner 官方微信

欢迎关注 DataLearner 官方微信,获得最新 AI 技术推送

DataLearner 官方微信二维码