DeciLM-7B-Instruct
DeciLM-7B-Instruct 是由 Deci 发布的 AI 模型,发布时间为 2023-12-12,定位为 聊天大模型,参数规模约为 70.4B,上下文长度为 8K,模型文件大小约 14.09,采用 Apache 2.0 许可。
数据优先来自官方发布(GitHub、Hugging Face、论文),其次为评测基准官方结果,最后为第三方评测机构数据。 了解数据收集方法
Deci公司开源的指令优化大模型,在DeciLM-7B模型( https://www.datalearner.com/ai-models/pretrained-models/DeciLM-7B )基础上进行LoRA微调得到。模型在DeciLM-7B基础上获得进一步的性能提升。
| Model | Average | ARC | HellaSwag | MMLU | TruthfulQA | Winogrande | GSM8K |
|---|---|---|---|---|---|---|---|
| DecilLM-7B | 61.55 | 59.39 | 82.51 | 59.76 | 40.33 | 79.95 | 47.38 |
| DecilLM-7B-instruct | 63.19 | 61.01 | 82.37 | 60.24 | 49.75 | 79.72 | 46.02 |
欢迎关注 DataLearner 官方微信,获得最新 AI 技术推送
