OSS Radar
首页
AI 分类
推理与服务5
大模型推理服务 · 向量化 / 重排服务 · 网关与路由
训练与微调6
训练框架 · 参数高效微调 · 后训练 / RLHF
数据工程4
数据集托管 · 数据清洗与处理 · 合成数据
检索与 RAG9
向量数据库 · RAG 框架 · 检索增强引擎
Agent 与编排6
Agent 框架 · 编码 Agent · 电脑 / 浏览器 Agent
评估 · 实验 · MLOps8
模型评测 · Agent 评测 · 实验管理
多模态生成5
图像生成 · 视频生成 · 视觉语言模型
视觉与 3D5
检测 / 分割 · 3D 重建 · 3D 生成
模型工具链8
量化 · 剪枝与蒸馏 · 格式转换
科研与论文实现3
论文复现 · 时序预测 · 科学计算 / 生物医药
开发工具
开发与框架5构建与交付4底层与逆向3
系统工具
系统与文件7图像与影音工具5实用小工具4
效率工具
记录与整理3输入与阅读4
媒体与内容
播放与媒体库4内容处理3
网络工具
访问与代理3连接与传输4
游戏相关
开发与运行2游玩相关2
安全与隐私
攻防与审计3加密与隐私1
硬件与机器人
嵌入式与物联网5机器人与具身智能3
数据与金融
数据库与存储4金融与量化1
探索排行榜开发语言标签
/
周报
本周新增、涨得最快、发了什么版本
对比项目
两个项目并排看 star、维护状态与硬件
数据体检
收录量、完整度缺口、沉睡项目
提交仓库
推荐项目,附上你的使用经验
反馈与纠错
分类错了、介绍不准、链接失效
关于本站
数据来源与分类原则
登录
OSS Radar

按算法工程工作流分类的开源工具库。数据来自 GitHub 公开 API,收录 6,740 个仓库、129 个细分分类。 带 ✦ 的条目有人工撰写的专家点评。

数据最近同步于 2026/11/11 14:07:13 · 本项目仅做聚合与索引,软件版权归原作者所有

浏览

  • 全部仓库
  • AI 分类
  • 排行榜
  • 开发语言
  • 标签与关键词
  • 搜索

关于

  • 关于本站
  • 数据体检
  • 提交仓库
  • 反馈与纠错
  • 偏好设置
  • 我的收藏
  • 我的点评
© 2026 OSS Radar数据每小时级同步 · 内容由算法与人工共同维护
⌘K
「LLM 网关」找到 82 个结果 · 18ms命中词:网关llmgatewayproxyroutergateway* proxy*只看有点评
L
litellm
BerriAI·Python

统一调用 100+ 家 LLM API 的 AI 网关,用 OpenAI 格式或原生格式接入,自带成本追踪、限流护栏、负载均衡和日志。

AI 网关+4
630760—
BerriAI/litellm · 21.5
9
9router
decolua·JavaScript

把 Claude Code、Cursor、Copilot 等编程助手接到 40+ 家免费模型供应商的 AI 网关,支持自动故障切换和 RTK 省 token,避免额度耗尽。

AI 网关+4
322420—
decolua/9router · 20.75
G
gateway
Portkey-AI·TypeScript

一个高性能 AI 网关,用统一 API 把请求路由到 1600+ 大模型,并内置 50+ 安全护栏,省去多模型接入和内容风控的重复开发。

AI 网关+4
133630—
Portkey-AI/gateway · 19.93
S
semantic-router
vllm-project·Go

面向 LLM 推理的可编程语义路由层,按请求语义把流量分发到不同模型和算力,并内置护栏与 K8s 集成。

语义路由+4
64490—
vllm-project/semantic-router · 19.46
A
agent-router
theagentrouter·Go

基于 Envoy Gateway 构建的生成式 AI 统一接入网关,把各家 LLM 和推理服务的调用收敛到一套路由与鉴权入口,方便在 Kubernetes 上统一管理。

AI 网关+4
23820—
theagentrouter/agent-router · 14.57
O
optillm
algorithmicsuperintelligence·Python

一个面向 LLM 的推理优化代理,通过 API 网关接入,自动套用思维链等推理策略来提升模型回答质量并降低调用成本。

推理优化+4
43400—
algorithmicsuperintelligence/optillm · 14.43
O
OrcaRouter-Lite
Continuum-AI-Corp·Python

自托管的 LLM 路由网关,兼容 OpenAI 接口,支持自带密钥和多模型流式转发,帮你在本地统一接入各家大模型 API。

LLM 路由+4
17440—
Continuum-AI-Corp/OrcaRouter-Lite · 14.13
L
llmgateway
theopenco·TypeScript

统一 API 接入多家大模型服务商,集中路由、管理并分析 LLM 请求,省去逐个对接和维护密钥的麻烦。

LLM 网关+4
17360—
theopenco/llmgateway · 13.96
L
litellm-agent-control-plane
LiteLLM-Labs·Rust

统一接入 OpenCode、Claude、Cursor 等多家编码 Agent 的控制平面,用一个入口调度和路由不同 Agent,省去逐个对接的麻烦。

Agent 控制平面+4
13300—
LiteLLM-Labs/litellm-agent-control-plane · 13.66
K
kong
Kong·Lua

云原生 API 网关,同时充当 LLM 与 AI 服务的统一入口,集中处理路由、鉴权、限流和可观测性。

API 网关+4
443780—
Kong/kong · 13.41
C
casbin-gateway
apache·Go

统一接入 44 家模型厂商的 AI 网关,实时监控本机各编码代理的调用行为,并给 API 做 A–F 真实性评级,防止用错或被盗用。

AI 网关+4
6490—
apache/casbin-gateway · 13.33
N
new-api
QuantumNous·Go

自托管的 LLM 网关,统一兼容 OpenAI、Claude、Gemini 等接口,提供模型路由、访问控制、用量统计与成本核算,方便团队集中管理和分发大模型调用。

LLM 网关+4
517230—
QuantumNous/new-api · 13.29
L
llmio
atopos31·Go

统一的多模型 LLM 网关,把 Claude、Gemini、DeepSeek 等上游统一接入,提供权重负载均衡、可观测性和调用费用追踪,适合多模型混用场景。

LLM 网关+4
3240—
atopos31/llmio · 13.22
N
nexus
Nexus-Router·Rust

面向 LLM 应用的统一网关,集中治理与保护各家大模型 API 调用,支持 MCP 协议接入。

LLM 网关+4
4380—
Nexus-Router/nexus · 13.14
R
respan-gateway
respanai·Rust

用 Rust 写的开源 LLM 网关,把 OpenAI、Anthropic、Gemini 等各家模型统一到一个接口,任意 SDK 和工具都能直接接入,省去多厂商适配的麻烦。

LLM 网关+4
6850—
respanai/respan-gateway · 13.11
H
hermes-agent
NousResearch·Python

一个可随使用不断成长的 AI Agent 框架,支持接入 Claude、ChatGPT 等多种大模型,用于搭建和编排自主智能体。

Agent 框架+3
2625110—
NousResearch/hermes-agent · 13.1
Y
yolorouter
yolorouter·Go

自托管的 OpenAI 兼容 LLM 网关,统一接入多家模型供应商,支持故障转移、密钥轮换和内置管理后台,帮团队稳定调度模型请求。

LLM 网关+4
3180—
yolorouter/yolorouter · 13.02
K
kiji-proxy
dataiku·Go

给 OpenAI 请求加一层隐私代理,自动检测并脱敏提示词中的 PII 等敏感信息,让调用大模型时不泄露用户数据。

隐私代理+4
4510—
dataiku/kiji-proxy · 13.02
O
OmniRoute
cheaper-inference·TypeScript

统一接入 375 家模型供应商、1400+ 模型的 MIT 协议 AI 网关,配额感知自动降级,并用压缩省下 15-95% token,兼容 Claude Code、Cursor 等编码工具。

AI 网关+4
863470—
cheaper-inference/OmniRoute · 12.98
A
ai-gateway
ferro-labs·Go

Go 编写的高性能 AI 网关,统一接入 30+ 家 LLM 服务商,内置缓存、护栏、A/B 测试和成本控制,可替代 LiteLLM 与 Kong AI Gateway。

AI 网关+4
2870—
ferro-labs/ai-gateway · 12.86
U
uncensored-ai-api
routerhubSI

一个统一 API 网关,用一把密钥即可调用 Claude、GPT、Gemini、Grok、DeepSeek 等主流大模型,并提供无审查、去对齐变体,兼容 OpenAI 与 Anthropic 接口,按 token 计费。

API 网关+4
3640—
routerhubSI/uncensored-ai-api · 12.84
H
higress
higress-group·Go

基于 Envoy 的云原生 AI 网关,统一代理和路由大模型 API 与微服务流量,支持 AI 原生插件扩展。

AI 网关+4
97490—
higress-group/higress · 12.73
B
bifrost
maximhq·Go

高性能 AI 网关,用一套 OpenAI 兼容 API 统一接入上万模型,内置故障转移、负载均衡、语义缓存、虚拟密钥与预算管控,额外延迟低于 200µs。

AI 网关+4
94890—
maximhq/bifrost · 12.7
A
apisix
apache·Lua

云原生 API 网关,基于 LuaJIT 提供高性能路由、负载均衡和 Kubernetes Ingress,并支持 AI 网关场景,适合统一管理微服务与 AI 流量。

API 网关+4
173110—
apache/apisix · 12.66
T
tyk
TykTechnologies·Go

开源 API 与 AI 网关,统一代理 REST、GraphQL、TCP、gRPC 和 MCP 流量,帮你在微服务和 LLM 调用前做路由、鉴权与限流。

API 网关+4
108810—
TykTechnologies/tyk · 12.65
G
gpt-load
tbphp·Go

自托管的 AI 网关,把多个渠道的 API 密钥和订阅账号统一接入,提供调度、故障转移、请求日志与用量统计,适合集中管理 LLM 调用。

AI 网关+4
72090—
tbphp/gpt-load · 12.48
O
opencodex
lidge-jun·TypeScript

把任意 LLM(Claude、Gemini、Grok、DeepSeek、Ollama 等)统一代理给 Codex CLI、App、SDK 和 Claude Code 使用,省去为每个模型单独适配的麻烦。

LLM 代理+4
183720—
lidge-jun/opencodex · 12.44
C
coai
coaidev·TypeScript

企业级多租户 LLM 网关,统一接入 200+ 模型和 35+ 供应商,带负载均衡、计费订阅和成本管理,适合团队统一管理 AI 调用。

LLM 网关+4
93460—
coaidev/coai · 12.43
O
one-api
songquanpeng·JavaScript

把 OpenAI、Claude、Gemini、通义千问等十几家主流大模型统一到一个 API 下,方便做密钥管理和二次分发,单文件部署开箱即用。

LLM API 网关+4
374020—
songquanpeng/one-api · 12.36
C
casdoor
casdoor·Go

开源的身份与访问管理(IAM)系统,带 Web 界面,支持 OAuth、OIDC、SAML、LDAP 等协议,同时可作为 LLM MCP 与 Agent 网关统一管理认证授权。

身份认证+4
148180—
casdoor/casdoor · 12.21
L
LocalAI
mudler·Go

开源本地 AI 推理引擎,无需 GPU 即可在任意硬件上跑 LLM、视觉、语音和图像生成模型,提供兼容 OpenAI 的 API。

推理引擎+4
503020—
mudler/LocalAI · 11.96
P
plano
katanemo·Rust

面向智能体应用的 AI 原生代理服务器和数据平面,提供 LLM 智能路由、可观测性、编排与护栏,让开发者专注核心逻辑。

LLM 网关+4
71140—
katanemo/plano · 11.94
M
magpie
yetone·Go

在 macOS 菜单栏里统一管理各家大模型的接入,让 Codex 跑在 DeepSeek 上、Claude Code 跑在 Kimi 上,省去逐个配置的麻烦。

模型路由+4
340960—
yetone/magpie · 11.91
C
ccproxy
starbaser·Python

给 Claude Code 加钩子的本地代理,能拦截并改写请求与响应,支持自定义模型名和按逻辑智能路由模型。

Claude Code+4
3570—
starbaser/ccproxy · 11.9
N
nasiko
Nasiko-Labs·Rust

用 Rust 写的 AI Agent 开放运行时,统一托管多智能体、MCP 网关和权限管控,省去自己搭调度与安全层的麻烦。

Agent 运行时+4
119700—
Nasiko-Labs/nasiko · 11.32
G
graphify
Graphify-Labs·Python

把代码库连同文档、SQL schema、配置和 PDF 一起解析成可查询的知识图谱,供 Claude Code、Cursor 等编码 Agent 做代码检索,全程本地 AST 解析、不依赖向量库。

知识图谱+4
1457480—
Graphify-Labs/graphify · 11.1
D
dsh-our-free-model
Ebony-Vinyl·JavaScript

给 dsh 装个插件就能免登录、免 API Key 直接用 DeepSeek V4.1 Flash、Kimi K3 等前沿大模型,完全免费且不限量。

免费大模型+4
690110—
Ebony-Vinyl/dsh-our-free-model · 11.03
D
deer-flow
bytedance·Python

开源的长时程 SuperAgent 运行框架,借助沙箱、记忆、工具、技能、子代理和消息网关,自动完成从研究、编码到内容创作的分钟级到小时级复杂任务。

Agent 框架+4
852330—
bytedance/deer-flow · 10.92
X
xiaozhi-esp32-server
xinnan-tech·JavaScript

为小智 ESP32 语音助手提供后端服务,快速搭建设备控制服务器,集成 Dify 与 MCP 能力。

ESP32+4
112420—
xinnan-tech/xiaozhi-esp32-server · 10.8
O
openfang
RightNow-AI·Rust

用 Rust 写的开源 Agent 操作系统,为 AI Agent 提供统一的运行与编排环境,支持 MCP 协议和 LLM 接入。

Agent 操作系统+4
182460—
RightNow-AI/openfang · 10.69

发布说明里提到「LLM 网关」

来自 6 个版本
  • akiralereal/iptvv4.71.02026-11-10

    …链接重新发给对方,重置后记录清空重新记。看到的全是内网地址时,多半是经过了反向代理或 Docker 网关,卡片上会提示要在反代上转发 X-Forwarded-For;直连公网时不认这个请求头,免得被人伪造。不显示地区,陌生 IP 请自己查归属地。记录从升级后开始记,存在 users.json 里,导出配置备份时会一并带走。 - 源管理标出

  • Mouseww/anything-analyzerv3.7.12026-11-10

    …nything Analyzer v3.7.1 新增 - 内置默认网关:无限星河AI — 设置 → LLM 的 Provider 下拉新增首项“无限星河AI(内置默认网关)”,全新配置默认选中,自动填入 OpenAI 兼容地址 https://infistar.cc/v1 ,只需填写 API Key 与模型 ID 即可使用。 - 注册入口

  • spacering-net/codegv0.42.22026-11-10

    ….321,适配器更新至 0.102.0 ,Fable 模型升级为 Fable 5.2,通过 API 网关使用时,已保存的 Fable 5.1 选择会自动切换到 Fable 5.2,不再回落到默认模型。 - Codex 适配器更新至 2.6.0(Codex 0.166.0) ,异步提问会显示为答题卡片,会话中和历史记录里都能正确展示。 -

  • JiangNanGenius/floe-agentandroid/v0.1.0-alpha.622026-11-08

    …、签名及摘要检查。 - 自更新与 Office/CAD 下载保留所选镜像。GitHub 浏览下载遇到网关/连接故障时可使用经验证的官方同资产地址,VNC 输入与画面接收分别串行处理。 - 13项本批组件检查、Full/Play Kotlin、58项封装及签名/16KiB检查通过;沿用未改的37项更新和4项BSD宿主检查、native23实

  • lycohana/BiliSumv1.21.32026-11-07

    … 一次性定时:在首页右侧菜单设置本次执行时间,支持分 P 和合集批量,普通开始按钮仍立即执行。 - LLM 失败续跑:保存转写与分段,修正配置后仅重跑 LLM,沿用同一任务,支持重启恢复。 - 自定义摘要提示词预设、Web / Docker Markdown 与图片 ZIP 下载,以及桌面内置 uv 安装。 - 修复迁移预览权限错误、长路

  • farion1231/cc-switchv4.0.272026-11-07

    …//github.com/farion1231/cc-switch/issues/5747))。有的网关在 /v1 和 /v1/ 之间互相重定向,现在测试收到重定向就算连得上。 - 打开对话框时窗口拖不动 ([ 9140](https://github.com/farion1231/cc-switch/pull/9140))。现在对话框打