核心信息

Requesty 称 Kimi K3.1 Pro 在其内部的 129 个 Go 后端任务中解决了 81%,表现与前沿实验室模型相当,并主张不要仅凭第三方基准选择模型。

要点

  • Requesty 在 129 个 Go 后端任务上对 Kimi K3.1 Pro 做了自建评测。
  • 该模型解决了其中 81% 的任务,被描述为与前沿实验室水平相当。
  • 该推文反驳了 FrontierCode 2.0 关于开源模型表现吃力的说法。
  • 建议:应在自身工作负载上评测新模型,而非依赖他人的基准。