Mistral AI · 128b

mistral-medium-3.5

Mistral Medium 3.5 is the first flagship model of Mistral AI that merged instruction-following, reasoning, and coding in a single set of 128B weights.

许可 unknownQ4 ~49GB舒适 84GB视觉 / OCR本地优先

部署预估(启发式)

默认推荐卡 H100 80GB · 量化 Q4 · ctx 8k · 并发 1

适配舒适
需 / 有效显存9.9/80G
吞吐 tok/s~121.5
引擎vLLM / SGLang

机房卡优先 vllm / sglang 连续服务;OpenAI 兼容对外暴露。

下载与部署入口

一键本地拉取

ollama run mistral-medium-3.5
参数128b
默认量化Q4
默认上下文8K
发布

推荐引擎

  • Ollama(上手最快)
  • llama.cpp / llama-server

标签:视觉 · 代码 · 推理 · Agent · 对话 · 家族 Mistral欧洲开源;Small/Large/Mixtral/Devstral 覆盖。

入门阅读:本地部署 · 显存对照 · 量化

同家族

mistral-medium-3.5 · 开源下载与本地部署 · GrokCode 倍率榜