Qwen2.5-0.5B

Qwen2.5-0.5B 是阿里巴巴于 2024 年 9 月发布的 Qwen2.5 系列中参数最少的基础模型。Qwen2.5 系列共 7 个尺寸（0.5B 到 72B），预训练数据约 18 万亿 token。

特点

• 参数：5 亿，稠密。
• 上下文：32K。
• 许可：Apache 2.0，可商用。

适用场景

显存占用极低，适合手机和嵌入式设备上的简单任务，也常被用作大模型投机解码的草稿模型，或作为教学、微调实验的起点。