首页 › 对比工具 › Mistral Small 3.1 24B 对比 Mistral Small 3.2 24B

Mistral Small 3.1 24BvsMistral Small 3.2 24B

完整对比: Mistral Small 3.1 24B (24B 参数,Mistral AI)以及 Mistral Small 3.2 24B (24B,Mistral AI)。各量化方式所需的 VRAM、在 4 款参考 GPU 上测得的每秒 token 数、针对各使用场景的评判、许可证及安装命令。所有数值均根据模型目录数据计算得出——页面之间没有复制粘贴。

简而言之

特性 Mistral Small 3.1 24B Mistral Small 3.2 24B
参数 24B 24B
系列 Mistral Mistral
作者 Mistral AI Mistral AI
来源国 FR FR
许可证 Apache 2.0 Apache 2.0
上下文 128 000 个 token 128 000 个 token
发布日期 2025年3月 2025年6月

内存占用

使用中等上下文窗口进行推理所需的大致 VRAM。获胜者(绿色)是消耗 更少 —— 小模型占优。

量化 Mistral Small 3.1 24B Mistral Small 3.2 24B
Q4_K_M(轻量) 14 GB 14 GB
Q5_K_M(平衡) 17 GB 17 GB
Q8(近乎无损) 26 GB 26 GB
FP16(最高质量) 48 GB 48 GB
仅使用 CPU 时所需的 RAM 24 GB 24 GB

预估速度(tokens/秒)

估算基于每个 GPU 上可运行的最佳量化。实际数字取决于提示词、上下文和引擎(llama.cpp、vLLM、MLX)。 方法说明.

参考 GPU Mistral Small 3.1 24B Mistral Small 3.2 24B
RTX 4090 (24 GB) 40 tok/s · Q5_K_M 40 tok/s · Q5_K_M
RTX 4080 (16 GB) 15 tok/s · Q4_K_M 15 tok/s · Q4_K_M
RTX 3060 12GB (12 GB) ✗ 过于庞大 ✗ 过于庞大
Apple M4 Pro (48 GB) (36 GB) 15 tok/s · Q8 15 tok/s · Q8

各使用场景的结论

对于每种常见用途,我们都会根据两个模型各自的标签、规模和专长,指出哪一个更适合。

通用聊天
势均力敌——取决于具体情况。 在此标准上两者相当,请根据您的 VRAM 或许可证限制做出选择。
正式法语
势均力敌——取决于具体情况。 在此标准上两者相当,请根据您的 VRAM 或许可证限制做出选择。
视觉 / 图像
势均力敌——取决于具体情况。 在此标准上两者相当,请根据您的 VRAM 或许可证限制做出选择。
RAG / 长文档
势均力敌——取决于具体情况。 在此标准上两者相当,请根据您的 VRAM 或许可证限制做出选择。
智能体与工具使用
势均力敌——取决于具体情况。 在此标准上两者相当,请根据您的 VRAM 或许可证限制做出选择。
本地 AI 套件

只需 1 小时,即可在您的电脑上拥有专属的免费 ChatGPT — LM Studio、Ollama、Open WebUI、您的文档,无需云端。

  • 在线空间,终身可用
  • PDF + 文件
  • 终身更新

优势与劣势

Mistral AI · 24B

Mistral Small 3.1 24B

增加了视觉能力的 Small 3。128k 上下文,Apache 2.0 许可。自 2025 年 6 月起被 Small 3.2 取代。

  • 24B 模型集成视觉与文本能力
  • 128k 上下文
  • Apache 2.0
  • 推理速度约 150 tok/s
  • 要求 Ollama ≥ 0.6.5
  • Small 3.2(2025 年 6 月)在原有基础上略有改进

安装

ollama run mistral-small3.1:24b
Mistral AI · 24B

Mistral Small 3.2 24B

Small 3.1 的 2025 年 6 月更新:生成无法停止的情况减少了一半,函数调用得到改进。

  • 相比 3.1,无限生成的情况减少一半
  • 函数调用功能增强
  • 视觉
  • Apache 2.0
  • 需要较新版本的 Ollama

安装

ollama run mistral-small3.2:24b

常见问题

在 RTX 4090(24 GB)上表现最佳的模型是 Mistral Small 3.1 24B 还是 Mistral Small 3.2 24B?

在 RTX 4090 上,Mistral Small 3.1 24B 运行时采用 Q5_K_M (~40 tok/s),Mistral Small 3.2 24B 在 Q5_K_M (约 40 tok/s)。仅比较吞吐量, Mistral Small 3.2 24B 胜出。请参阅 配置工具 以测试您的具体 GPU。

Mistral Small 3.1 24B 和 Mistral Small 3.2 24B:哪个的法语表现更好?

使用法语进行基础聊天时,两者表现相当。对于文学或法律文本,建议优先选择来自欧洲的模型(参见 我们的FR指南).

哪个模型 VRAM 占用最少?

两者在 Q4 量化下所需的 VRAM 相同(14 GB)。因此,选择取决于许可证或主观感受到的质量。

这些模型可用于商业生产环境吗?

Mistral Small 3.1 24B 采用 Apache 2.0 许可证——可自由用于商业用途。 Mistral Small 3.2 24B 采用 Apache 2.0 许可证,同样可自由使用。对于 SaaS,请优先选择 Apache 2.0 或 MIT。

2026 年选哪个?

这取决于您最主要的限制条件。 更小 / 更快 : Mistral Small 3.1 24B (24B)。 能力更强 : Mistral Small 3.1 24B (24B)。若犹豫,可先运行该模型 配置工具 结合您的 GPU 和使用场景——它将基于这两者做出判断。

值得考虑的替代方案

如果两者都不适合您,以下是您可以探索的相近模型。

深入了解