返回

Phi-3.5 Mini

Microsoft · 3.8B · Dense

Microsoft 高效小模型 — 超长上下文支持,轻量化性能出色

600.1K downloads 965 likes 1yr ago 128K tokens
使用场景
reasoning code chat
硬件评估
VRAM
速度
基于 Q4_K_M

量化选项

量化 位数 VRAM 质量 状态
Q2_K 2 1.2 GB
Q3_K_M 3 1.7 GB 中等
Q4_K_M 4 1.9 GB 良好
Q5_K_M 5 2.4 GB 良好
Q6_K 6 2.9 GB 优秀
Q8_0 8 3.9 GB 优秀
F16 16 7.8 GB 无损

你的硬件

Q4_K_M 基准评分
检测中...

安装

ollama run phi3.5
从 HuggingFace 下载 GGUF

规格

参数量
3.8B
架构
Dense
工具调用
不支持
上下文
128K tokens
最低内存
2.1 GB
推荐内存
3.5 GB
系列
Phi
发布时间
2024-08

HuggingFace Stats

Downloads
600.1K
Likes
965