返回
Mistral 7B v0.3
🔧 Tool Use
Mistral AI · 7B · Dense
Mistral 经典 7B — 滑动窗口注意力机制，长文处理能力出色
1.6M downloads 2.5K likes 1yr ago 32K tokens 硬件评估 VRAM — —
速度 —
基于 Q4_K_M
量化选项
| 量化 | 位数 | VRAM | 质量 | 状态 |
| Q2_K | 2 | 2.2 GB | 低 | — |
| Q3_K_M | 3 | 3.1 GB | 中等 | — |
| Q4_K_M ★ | 4 | 3.6 GB | 良好 | — |
| Q5_K_M | 5 | 4.5 GB | 良好 | — |
| Q6_K | 6 | 5.4 GB | 优秀 | — |
| Q8_0 | 8 | 7.2 GB | 优秀 | — |
| F16 | 16 | 14.3 GB | 无损 | — |
你的硬件
NVIDIA RTX 50 系列
NVIDIA RTX 40 系列
NVIDIA RTX 30 系列
NVIDIA 专业显卡
NVIDIA RTX 20 系列
NVIDIA 数据中心
NVIDIA GTX 16 系列
NVIDIA GTX 10 系列
NVIDIA GTX 9 系列
AMD RX 9000 系列
AMD RX 7000 系列
AMD RX 6000 系列
AMD RX 5000 系列
AMD 旧款/其他
Intel Arc
Intel 核显
Apple Silicon
规格
- 参数量
- 7B
- 架构
- Dense
- 工具调用
- 支持
- 上下文
- 32K tokens
- 最低内存
- 3.9 GB
- 推荐内存
- 6.5 GB
- 系列
- Mistral
- 发布时间
- 2024-05
HuggingFace Stats
- Downloads
- 1.6M
- Likes
- 2.5K