登录 注册

OmniRoute (AI 模型聚合网关)

去点 Star
AI 应用与 AI Agent开发者工具AI 模型与开发框架
86,621
Stars
0
Forks
0
Watchers
0
Open Issues
未知
许可证
TypeScript
语言
创建时间
最近更新

项目能做什么

免费 MIT 协议 AI 网关,单接口聚合数百家服务商及上千款模型,兼容 Cursor、Cline 等工具。
来源:AI 基于仓库事实生成 · 内容以仓库实际 README 为准

使用说明 查看原始 README 原仓库文档

{
  "project_name": "OmniRoute",
  "project_intro": "OmniRoute 是一款开源且免费(MIT 协议)的 AI 网关。它将多达 375+(或 388)家模型供应商聚合为一个统一的 API 端点,支持接入包括 Kimi、Claude、GPT、Gemini、GLM、DeepSeek、MiniMax 等在内的 1400 多个模型。项目核心亮点在于整合并自动管理各服务商的免费额度(涵盖 150+ 免费层,累计可达约 16.2 亿 Token/月),并支持配合 Claude Code、Cursor、Cline、Codex 等 AI 编码工具使用。",
  "core_features": [
    "单一统一端点:对接 375+ 供应商与 1400+ 模型,无缝兼容主流编程与客户端工具。",
    "免费层额度池管理:聚合分类第三方免费额度,提供额度感知与自动故障转移(auto-fallback)。",
    "极高 Token 压缩:搭载 RTK + Caveman 叠加压缩技术,据项目介绍可节省 15%–95%(平均约 89%)的 Token 消耗。",
    "路由策略与协议支持:内置 20 种路由策略,支持 MCP/A2A 协议,提供 Desktop 与 PWA 客户端界面。",
    "可视化仪表盘:支持通过 `/dashboard/free-tiers` 查看实时可用与已消耗的免费额度。"
  ],
  "target_users": [
    "重度依赖 Claude Code、Cursor、Cline、Copilot 等工具进行 AI 辅助编程的开发者。",
    "希望最大化白嫖各模型平台免费额度、避免频繁遭遇调用限流(Rate Limit)的个人开发者。",
    "需要跨多家大模型(如 DeepSeek、Claude、OpenAI、Gemini)统一调用入口的技术人员。"
  ],
  "installation_steps": "此部分原文未说明,请查看原仓库(README 截断内容未包含环境依赖与安装部署命令)。",
  "configuration_instructions": "此部分原文未说明,请查看原仓库(README 仅提及需自带第三方供应商账号并在仪表盘连接凭证,具体配置文件与参数未在截断内容中展示)。",
  "faq": [
    "Q: OmniRoute 本身赠送免费 Token 吗?\nA: 不赠送。所谓的月度免费额度来自各第三方平台的免费层汇总,用户需要使用自己的凭据(Bring your own provider accounts)连接各个服务商。",
    "Q: 为什么部分平台的额度没有直接计入总量?\nA: 存在地域实名认证限制的平台(如 ModelScope)会单独列出,不会直接计入默认的宣传额度统计中。",
    "Q: 支持哪些常见编程辅助工具?\nA: 原文说明兼容 Claude Code、Codex、Cursor、OpenCode、Cline、Copilot 及 Antigravity 等。"
  ]
}
原始 README 摘录(英文原文,节选前 3000 字符)
<div align="center">

<img src="./docs/screenshots/MainOmniRoute.png" alt="OmniRoute Dashboard" width="820"/>

<br/>
<br/>

# 🚀 OmniRoute — The Free AI Gateway

**Created by [Diego Souza](https://github.com/diegosouzapw)**

<img src="./docs/diagrams/readme-hero.svg" width="100%" alt="OmniRoute — Never stop coding. Every AI tool → 388 providers — 150+ free — through one endpoint. Claude Code, Codex, Cursor, Cline, Copilot & Antigravity into FREE Claude / GPT / Gemini with auto-fallback. RTK + Caveman stacked compression saves 15–95% tokens (~89% avg) — never hit limits. 388 AI providers · 150+ free tiers · ~1.62B free tokens/mo · 20 routing strategies · $0 to start."/>

</div>

<div align="center">

## 💰 ~1.62B Tokens / Month Across Third-Party Free Tiers

</div>

> **Bring your own provider accounts.** This is an estimated aggregate across separately eligible third-party free tiers, not a token grant from OmniRoute. Sign up, obtain credentials where required, and connect the providers you can use; each provider controls its limits, availability, and terms.
>
> Stacking free tiers by hand is painful — dozens of SDKs, dozens of rate limits, and no idea how much you actually have. OmniRoute catalogs **465 free-tier entries across 34 recurring pool keys** and computes the token headline from the **17 pools with a published positive monthly budget plus five per-model Groq caps**, deduplicated by shared pool. Quotas that only open after a regional identity check (today: ModelScope) are shown apart, +~6M behind regional identity verification, and never summed into the headline. The result stays visible on the dashboard (`/dashboard/free-tiers`).

<img src="./docs/diagrams/free-tier-budget.svg" width="100%" alt="OmniRoute free-tier budget card: ~1.62B free tokens per month steady, up to ~2.22B in the first month with signup credits, from 34 documented recurring pool keys covering 465 cataloged free-tier entries behind one endpoint. Honest pool-deduped math — each shared pool counted once, including 17 recurring pools with a published positive monthly token budget plus five per-model Groq caps; 12 providers are marked avoid in the terms-risk catalog so you decide. Budget bar includes Mistral 1B, Nara 210M, LLM7 150M, xKiro 150M, Groq 30M (five per-model caps) and smaller pools, plus first-month signup credits and permanently-free no-token-cap providers surfaced separately so they never inflate the headline. Live used/remaining on /dashboard/free-tiers."/>

> Animated summary of the live `/dashboard/free-tiers` page. Full methodology (pool dedupe, credit tiers, provider terms): **[docs/reference/FREE_TIERS.md](docs/reference/FREE_TIERS.md)**.
>
> <sub>These figures are re-audited every two weeks against the live catalog and **move both ways** — a provider ends a free tier and the number drops; a new one lands and it climbs. We publish what the catalog actually computes, never a rounded-up best case.</sub>

<br/>

<div align="center">

<h3>

⭐ Star the repo
阅读完整原文

商业机会分析 AI 生成

云端托管版 AI Gateway (Managed SaaS)

产品构想基于开源核心构建开箱即用的云端代理服务,用户无需本地运行服务或配置桌面环境,一键生成单一 API 终端接入所有开发工具。
核心功能云端 Key 保险箱、自动健康检查与失效告警、跨设备统一终端配置、图形化消费报表与路由规则同步。
目标用户嫌本地部署麻烦的个人开发者、多设备流动作业的程序员、小型外包团队。
难度/周期中等 · 3-5 周 · 成本:低(云服务器、出口带宽、密钥加密存储服务)
收费模式免费版限制请求频次,Pro 版收取月度订阅费(推测 $5-$15/月)。
竞争风险用户对第三方托管高价值 API Key 存在信任顾虑;云端出口 IP 聚合请求易触发供应商风控。
依据 数据支持的判断

团队研发 AI 效能与合规审计网关 (Team/Enterprise Edition)

产品构想面向企业团队的自托管商业增值版本,聚焦内部 AI 支出管控、敏感代码外泄防护及统一采购降本。
核心功能单点登录 (SSO)、基于成员的配额预算与权限分配、敏感数据与密钥防泄漏审查 (DLP)、团队使用明细与 ROI 报表、内部模型私有化回落支持。
目标用户中小型科技公司技术负责人 (CTO)、研发效能部门、管理多名使用 AI 编程助手的团队主管。
难度/周期中偏高 · 2-3 个月 · 成本:中等(主要是企业级功能开发与安全合规测试时间)
收费模式按席位月费/年费授权(如 $10/人/月),或自托管商业许可证模式。
竞争风险开源版本采用 MIT 协议,企业可能直接使用免费版本自行定制二次开发,销售转化周期较长。
依据 已验证事实

专有 Token 压缩与智能路由独立模块 (Compression SDK / Micro-SaaS)

产品构想剥离并升级项目核心的 RTK+Caveman 压缩逻辑,作为独立 SDK 或代理插件提供给 AI Agent 开发者和高并发推理场景。
核心功能语法树感知(AST-aware)无损代码压缩、动态上下文修剪策略、压缩效果与精度损失基准对比评测。
目标用户构建长上下文 AI Agent、自动化工作流的初创企业及独立开发者。
难度/周期高 · 1.5-2 个月 · 成本:低(算法调优与基准测试运行成本)
收费模式按压缩节省的 Token 比例抽成(推测)或 SDK 商业授权费。
竞争风险模型厂商长文本推理价格持续下降可能弱化用户压缩动力;过度压缩存在降低代码生成正确率的风险。
依据 尚需验证的假设
AI 基于仓库公开数据分析生成,含推测成分,不构成收益承诺。
报告会保存到 个人中心

竞品与相似项目 GitHub Search 真实检索

项目中文简介Stars语言
a2aproject/A2A 用于不同黑盒智能体间通信与互操作的开放协议。 26,479 Shell
liyupi/ai-guide 汇集大模型玩法、编程工具、开发框架与变现指南的 AI 综合资源库。 21,997 JavaScript
a2ui-project/a2ui 支持智能体流式传输布局,并在多端原生组件中渲染的生成式 UI 框架。 17,045 TypeScript
GetBindu/Bindu 专为 AI 智能体设计的身份认证、通信与支付层。 9,997 Python
google/adk-go 用于构建、评估和部署复杂 AI 智能体的代码优先 Go 语言工具包。 8,959 Go
EvoMap/evolver 基于 GEP、支持审计的 AI 智能体自我进化引擎。 8,737 JavaScript
以上为通过 GitHub 官方 Search API 检索的相似项目,功能差异与优劣势需进一步人工确认,配置 AI 后可生成对比分析。

项目优势与风险

技术成熟度创建于 ,最近推送 ,发布过 100 个 Release
社区活跃Star 86,621 / Fork 0 / Issue 0(数据支持,可自行核实)
许可证未检测到(需人工确认)
主要风险上游项目方向可能变化;同赛道竞争者较多(见竞品表);热度与需求不完全等价

安装与使用

快速开始(以仓库 README 为准)
git clone https://github.com/cheaper-inference/OmniRoute.git
cd OmniRoute
# 请阅读仓库 README 获取确切安装步骤(依赖、配置、启动命令)
阅读原仓库文档
术语说明:Docker=应用容器(把程序和依赖打包运行);API Key=调用外部服务的密钥;Git Clone=把仓库代码下载到本地。常见错误:API Key 未配置 / 端口占用 / 数据库连接失败,多数项目在 README 的 Troubleshooting 章节有说明。