Qwen3 0.6B Q4_K_M
Qwen3 0.6B Q4_K_M 是 Qwen 家族的一款紧凑型模型,采用 4 位高压缩量化。拥有 0.6 亿参数,分布于 28 网络层,具备 33K 的上下文窗口,可在入门级 GPU 上流畅运行。它以 42/100 的质量评分提供入门级能力,适合资源受限环境。
技术规格
| 模型家族 | Qwen |
| 完整名称 | Qwen3 0.6B Q4_K_M |
| 参数量 | 0.6 B600,000,000 总参数量 |
| 量化格式 | Q4_K_M4-bit |
| 推荐显存 | 1.2GB最低显存 0.8 GB |
| 上下文长度 | 32,768tokens |
| 隐藏维度 | 1024 |
| 网络层数 | 28 |
| 质量评分 | 42/100 |
| 模型体积 | 0.3 GB仅模型权重,不含 KV Cache |
Strengths
- 低显存需求(1.2 GB)— 可在大多数消费级 GPU 上运行
- 充足的 33K 上下文窗口,满足多数应用需求
- 高压缩量化(Q4_K_M — 4 位)— 显存占用极小
- 紧凑体量 — 即使在普通硬件上也能快速推理
Limitations
- 质量评分一般(42/100)— 复杂推理场景可能力不从心
- 高压缩量化可能带来轻微质量损失
- 参数量较小,复杂任务能力有限