OmniRoute

兼容 OpenAI 的网关,支持多提供商路由、重试、回退、缓存和可观测性

仍在活跃开发:最近 90 天有 5,088 次提交,最近一次提交在 2026-09-30。

GitHub 星数
7.2 万
近 30 天涨星
+11,269
近 90 天提交
5,088
近 6 个月发版
10

OmniRoute 提供一个兼容 OpenAI 的端点,用于访问多个 AI 提供商的模型。它支持重试、配额感知回退、缓存、token 压缩、可观测性、MCP 和 A2A,并设计用于配合 Claude Code、Codex、Cursor、OpenCode、Cline 和 Copilot 等编程工具使用。

和同类工具的区别

它将兼容 OpenAI 的端点与广泛的提供商路由支持、配额感知故障转移、token 压缩以及持续维护的免费层级目录相结合。

主要能力

  • 多提供商模型路由
  • 重试和配额感知自动回退
  • 响应缓存
  • 用量可观测性
  • RTK 和 Caveman token 压缩
  • 免费层级配额目录和仪表板

适合

  • 跨多个模型提供商构建 Agent 或编程工作流的开发者
  • 寻求具备提供商故障转移能力的单一 OpenAI 兼容端点的团队
  • 管理多个提供商配额和免费层级的用户

不太适合

  • 寻求独立消费级 AI 应用的用户
  • 需要单一提供商 SDK 且不涉及网关基础设施的团队

局限

  • 可用性和配额取决于第三方提供商的条款
  • 已公布的免费层级数值可能随着提供商新增或终止优惠而变化
  • 部分配额要求进行区域身份验证

OmniRoute 的替代品

  • LiteLLM:开源 Python SDK 和 AI 网关,通过统一的 OpenAI 兼容接口调用 100+ 个 LLM(6 万星)
  • Bifrost AI Gateway:最快的企业级 AI 网关(比 LiteLLM 快 50x),具备自适应负载均衡器、集群模式、安全护栏,支持 1000+ 模型,在 5k RPS 下开销 <100 µs。(8,498星)
  • AI Gateway(1.3 万星)
  • TensorZero(1.2 万星)
  • helicone(6,190星)
  • Manifest:面向 OpenClaw 的智能 LLM 路由。成本最高降低 70% 🦞🦚(7,552星)

查看完整替代品对比(英文)→

常见问题

OmniRoute 是做什么的?
OmniRoute 提供一个兼容 OpenAI 的端点,用于访问多个 AI 提供商的模型。它支持重试、配额感知回退、缓存、token 压缩、可观测性、MCP 和 A2A,并设计用于配合 Claude Code、Codex、Cursor、OpenCode、Cline 和 Copilot 等编程工具使用。
OmniRoute 还在维护吗?
仍在活跃开发:最近 90 天有 5,088 次提交,最近一次提交在 2026-09-30。
OmniRoute 有哪些替代品?
和 OmniRoute 最接近的开源替代品有 LiteLLM、Bifrost AI Gateway、AI Gateway、TensorZero、helicone、Manifest。
OmniRoute 是开源的吗?
是的,OmniRoute 是开源项目,代码托管在 GitHub 上。

星数、提交和发版数据来自 GitHub API,每天自动刷新。介绍文字由 AI 从英文翻译,并经过第二个模型的回译校对。 项目地址:github.com/diegosouzapw/OmniRoute

你也在做 AI Agent 工具?

可以免费提交收录,也可以付费加急审核。

提交你的工具 →