DataLearner 标志

CPM-Bee

基础大模型

Chinese Pretrained Model - Bee

发布时间: 2023-05-27更新于: 2023-07-07浏览量: 796
上下文长度
2K
最佳榜单名次
第 28 / 48
查看全部评测
是否开源
开源
Apache 2.0
参数 100亿
查看开源信息

CPM-Bee is a 10B-parameter open Chinese-English base model from Tsinghua University's NLP lab and ModelBest, released in May 2023. It was later the base of the VisCPM multimodal models and was free for commercial use after registration.

数据优先来自官方发布(GitHub、Hugging Face、论文),其次为评测基准官方结果,最后为第三方评测机构数据。 了解数据收集方法

CPM-Bee

模型基本信息

推理过程
暂无数据
思考模式
不支持思考模式
上下文长度
2K tokens
最大输出长度
暂无数据
模型类型
基础大模型
输入/输出模态
暂无数据
发布时间
2023-05-27
模型文件大小
19.2GB
MoE架构
否
总参数 / 激活参数
100亿 / 不适用
知识截止
暂无数据
CPM-Bee

开源和体验地址

代码开源状态
预训练权重开源
Apache 2.0 - 免费商用授权
在线体验
暂无
CPM-Bee

官方介绍与博客

CPM-Bee

API接口信息

接口速度
暂无数据
暂无公开的 API 定价信息。
CPM-Bee

评测结果

CPM-Bee 当前已收录的代表性评测结果包括 C-Eval(28 / 48,得分 54.10)。 本页还汇总了参数规模、上下文长度与 API 价格,便于结合评测结果与部署约束一起判断模型适配度。

思考模式

综合知识考试

共 1 项评测
评测名称 / 模式
得分
排名/总数
C-Eval
常规模式
54.10
28 / 48
CPM-Bee

发布机构

Chinese Pretrained Model - Bee

模型解读

CPM-Bee是清华大学NLP实验室发布的一个中文大语言模型。完全开源!

-----------------2023年6月30日---------------------

基于CPM-Bee的多模态大模型VisCPM发布: https://www.datalearner.com/blog/1051688132077366  

-----------------2023年6月27日---------------------

CPM-Bee发布一个月之后的功能更新: https://datalearner.com/blog/1051687966305189 

-----------------2023年5月27日---------------------

关于CPM-Bee的详细介绍: https://www.datalearner.com/blog/1051685537043575 
CPM-Bee模型参数CPM-Bee模型参数结果
模型名称CPM-Bee
模型架构transformer
基础模型CPM-Ant
模型最大参数10亿
训练时间2022年10月13日-2023年5月27日
模型类型基础语言模型
训练数据集200GB高质量中文数据集+400GB多语言数据集
训练数据集tokens数1万亿

CPM-Bee包含4个版本,其具体参数和预训练结果下载地址参考:

CPM-Bee模型版本推理的显存预训练结果下载地址推荐的硬件
CPM-Bee-10B20GB https://huggingface.co/openbmb/cpm-bee-10b/tree/main RTX3090(24GB)
CPM-Bee-5B11 GB https://huggingface.co/openbmb/cpm-bee-5b/tree/main RTX 3090(24 GB)
CPM-Bee-2B6.7 GB https://huggingface.co/openbmb/cpm-bee-2b/tree/main GTX 1080(8 GB)
CPM-Bee-1B4.1 GB https://huggingface.co/openbmb/cpm-bee-1b/tree/main GTX 1660(6 GB)

基础模型

DataLearner 官方微信

欢迎关注 DataLearner 官方微信,获得最新 AI 技术推送

DataLearner 官方微信二维码