核心信息
Switchboard 是一个面向 LiteLLM 代理的小型社区工具,为每个模型系列维护稳定别名,让用户在切换 vLLM、llama.cpp、Ollama 等本地后端时无需重新配置下游工具。
要点
- 自动检测正在运行的模型并读取其 ID
- 将系列别名指向检测到的模型,或新增别名
- 每次修改前备份 LiteLLM 配置
- 重新加载 LiteLLM 并用真实对话补全进行验证
- 出错时自动回滚;仅修改 LiteLLM 配置
Switchboard 是一个面向 LiteLLM 代理的小型社区工具,为每个模型系列维护稳定别名,让用户在切换 vLLM、llama.cpp、Ollama 等本地后端时无需重新配置下游工具。