返回

GLM-4 9B

🔧 Tool Use

Zhipu AI · 9B · Dense

智谱 AI 多语言 9B — 支持 26 种语言,128K 超长上下文

199.2K downloads 703 likes 1yr ago 128K tokens
使用场景
chat multilingual code
硬件评估
VRAM
速度
基于 Q4_K_M

量化选项

量化 位数 VRAM 质量 状态
Q2_K 2 2.9 GB
Q3_K_M 3 4 GB 中等
Q4_K_M 4 4.6 GB 良好
Q5_K_M 5 5.8 GB 良好
Q6_K 6 6.9 GB 优秀
Q8_0 8 9.2 GB 优秀
F16 16 18.4 GB 无损

你的硬件

Q4_K_M 基准评分
检测中...

安装

ollama run glm4:9b
从 HuggingFace 下载 GGUF

规格

参数量
9B
架构
Dense
工具调用
支持
上下文
128K tokens
最低内存
5 GB
推荐内存
8.4 GB
系列
GLM
发布时间
2024-06

HuggingFace Stats

Downloads
199.2K
Likes
703