核心信息
OpenRouter 新一代 Auto Router 具备缓存感知能力:由于切换模型会让新模型重建输入 token 缓存,路由器在推理强度调整足够时会优先这么做,只有当收益超过缓存损失时才真正换模型。
要点
- 切换模型时,新模型重建输入 token 缓存会带来额外成本。
- Auto Router 优先调整推理强度,仅在收益足以抵消缓存损失时才切换模型。
- 真正切换时,会综合实时价格、基准表现、用户设定的护栏等因素来选择模型与推理强度。
- 这是 OpenRouter 新一代路由产品线的一部分,同期还有面向编码智能体的 Auto Code。