返回
Mixtral 8x22B
🔧 Tool Use
Mistral AI · 141B · MoE
Mistral 大型 MoE — 8 专家激活 39B，旗舰推理性能
16.5K downloads 746 likes 1yr ago 64K tokens 硬件评估 VRAM — —
速度 —
基于 Q4_K_M
量化选项
| 量化 | 位数 | VRAM | 质量 | 状态 |
| Q2_K | 2 | 45.1 GB | 低 | — |
| Q3_K_M | 3 | 63.2 GB | 中等 | — |
| Q4_K_M ★ | 4 | 72.2 GB | 良好 | — |
| Q5_K_M | 5 | 90.3 GB | 良好 | — |
| Q6_K | 6 | 108.3 GB | 优秀 | — |
| Q8_0 | 8 | 144.4 GB | 优秀 | — |
| F16 | 16 | 288.9 GB | 无损 | — |
你的硬件
NVIDIA RTX 50 系列
NVIDIA RTX 40 系列
NVIDIA RTX 30 系列
NVIDIA 专业显卡
NVIDIA RTX 20 系列
NVIDIA 数据中心
NVIDIA GTX 16 系列
NVIDIA GTX 10 系列
NVIDIA GTX 9 系列
AMD RX 9000 系列
AMD RX 7000 系列
AMD RX 6000 系列
AMD RX 5000 系列
AMD 旧款/其他
Intel Arc
Intel 核显
Apple Silicon
规格
- 参数量
- 141B
- 架构
- MoE
- 工具调用
- 支持
- 上下文
- 64K tokens
- 最低内存
- 78.8 GB
- 推荐内存
- 131.3 GB
- 系列
- Mistral
- 发布时间
- 2024-04
HuggingFace Stats
- Downloads
- 16.5K
- Likes
- 746