LiteLLM (LiteLLM)

收录于 https://litellm.ai

综合排名 #12 ⭐ 可考虑
✅ 开源自部署,无限制 | 🌍 国际

💰 Token 价格

类型 价格 备注
输入 (Input) 开源免费自部署;LiteLLM Cloud 按量计费 每百万 tokens
输出 (Output) 开源免费自部署;LiteLLM Cloud 按量计费 每百万 tokens
💡 免费额度

开源版完全免费(自托管)

🤖 支持模型(共 100 个)

通过 Proxy 转发 100+ Provider 任意模型

✨ 优势

  • 100+ Provider 统一接口的知名开源方案
  • 自部署完全免费,数据不出私网
  • 支持 Provider Fallback、负载均衡、预算控制
  • Docker 一键部署
  • Active GitHub 社区增长快
  • 支持自定义 Provider 和模型映射

⚠️ 不足

  • × 自部署需要运维能力(Docker/服务器)
  • × 无开箱即用的 SaaS 可观测性
  • × 不提供加密/Guardrails
  • × 高级功能需要自己开发
  • × 非标准 API 格式的 Provider 适配有限

🎯 适合场景

需要自托管 API 网关的团队;数据隐私敏感的应用;不想付 SaaS 网关费用的开发者