PH

Phi-1.5

Phi-1.5

发布时间: 2023-09-11429
模型参数
13.0亿
上下文长度
2K
中文支持
不支持
推理能力

模型基本信息

推理过程
不支持
上下文长度
2K tokens
最大输出长度
暂无数据
模型类型
暂无数据
发布时间
2023-09-11
模型文件大小
2.84GB
MoE架构
总参数 / 激活参数
13.0 亿 / 不涉及
知识截止
暂无数据
推理模式
暂无模式数据

开源和体验地址

代码开源状态
预训练权重开源
GitHub 源码
暂无GitHub开源地址
在线体验
暂无在线体验地址

官方介绍与博客

DataLearnerAI博客
暂无介绍博客

API接口信息

接口速度
暂无数据
暂无公开的 API 定价信息。

评测得分

当前尚无可展示的评测数据。

发布机构

模型解读

Phi-1.5是微软的编程大模型Phi-1的迭代版本。在Phi-1模型中,微软证明了使用教科书般高质量的数据集可以让小规模参数的语言模型拥有很高的编程水平。因此,微软继续尝试。


在Phi-1模型的基础上,微软继续加入新的NLP合成文本数据集来提升模型的语言理解能力,最终得到了Phi-1.5模型。


Phi-1.5与Phi-1一样,只有13亿的参数,但是在多个评测上的效果都远超同类规模的模型。而代码能力降低不高。


而这个参数规模是可以在手机上运行的。


微软还训练了另一个模型phi-1.5-web,加入了部分过滤后的网络语料。结果表明,高质量合成数据的作用远远大于网络语料。



Phi-1模型的简介: https://www.datalearner.com/ai-models/pretrained-models/Phi-1 

DataLearner 官方微信

欢迎关注 DataLearner 官方微信,获得最新 AI 技术推送

DataLearner 官方微信二维码