GT
GTE-Base
基础大模型Gegeral Text Embeddings - Base
发布时间: 2023-08-07更新于: 2023-08-08 16:23:08.219667
模型参数
1.1亿
上下文长度
512
中文支持
不支持
推理能力
Gegeral Text Embeddings - Base 是由 阿里巴巴 发布的 AI 模型，发布时间为 2023-08-07，定位为 基础大模型，参数规模约为 1.1亿，上下文长度为 512，模型文件大小约 219MB，采用 MIT License 许可。
数据优先来自官方发布（GitHub、Hugging Face、论文），其次为评测基准官方结果，最后为第三方评测机构数据。 了解数据收集方法
GTE-Base
模型基本信息
推理过程
不支持
思考模式
不支持思考模式
上下文长度
512 tokens
最大输出长度
暂无数据
模型类型
基础大模型
输入/输出模态
暂无数据
发布时间
2023-08-07
模型文件大小
219MB
MoE架构
否
总参数 / 激活参数
1.1亿 / 不涉及
知识截止
暂无数据
GTE-Base
开源和体验地址
GTE-Base
官方介绍与博客
DataLearnerAI博客
暂无介绍博客
GTE-Base
API接口信息
接口速度
暂无数据
暂无公开的 API 定价信息。
GTE-Base
评测结果
当前尚无可展示的评测数据。
和其他模型对比
暂时没有为该模型整理的相关对比页面。
想自定义其他组合？打开对比工具
GTE-Base
发布机构
阿里巴巴
查看发布机构详情 Gegeral Text Embeddings - Base
模型解读
GTE全称Gegeral Text Embeddings，是阿里巴巴提出的一种文本嵌入大模型。该模型开源版本包含3：分别是3.3亿参数的Large版本、1.1亿参数的Base版本和0.3亿参数的small版本。
GTE模型支持的输入序列长度维512，输出的embedding维度是1024，对于超过序列长度的输入将会截断。GTE模型完全开源，开源协议是MIT，可以商用。不过仅支持英文。
| 模型 | 参数量 | 预训练数据量 | 预训练方式 | 微调数据量 | 微调方式 |
|---|---|---|---|---|---|
| GTE小型 | 约3000万 | 约80亿个文本对 | 无监督对比学习 | 约300万个文本三元组 | 多任务监督对比微调 |
| GTE基准 | 约1.1亿 | 约80亿个文本对 | 无监督对比学习 | 约300万个文本三元组 | 多任务监督对比微调 |
| GTE大型 | 约3.3亿 | 约80亿个文本对 | 无监督对比学习 | 约300万个文本三元组 | 多任务监督对比微调 |
DataLearner 官方微信
欢迎关注 DataLearner 官方微信，获得最新 AI 技术推送
