核心信息

MiniMax M3.1 Flash 借助 SGLang 在 batch size 1 解码下达到超 1K tok/s,并获得 SGLang 与 Miles 的首日生产级支持。

要点

  • 使用 SGLang 在 bs1 解码下速度超 1K tok/s
  • 广泛硬件支持,包括 NVIDIA Blackwell 与 Hopper(GB300/B300/B200)以及 AMD
  • 由 MiniMax、NVIDIA、AMD 与 RadixArk 联合完成
  • 通过 Miles 支持强化学习
  • 首日即覆盖推理与强化学习场景