gateway

给大模型装个防火墙,安全可控地接入 AI 应用

gateway 是一个开源的 LLM 防火墙,旨在为 AI 应用提供安全网关。它通过自托管方式,在应用与大模型之间建立统一入口,解决企业使用 AI 时的安全管控难题。核心能力包括:强大的护栏机制,可对输入输出进行内容过滤、敏感信息检测和合规校验;访问控制,支持基于角色的权限管理和 API 密钥管理;流量监控,实时记录和审计所有模型调用日志。项目基于 Python 构建,部署简单,支持自定义策略,帮助开发者在享受大模型能力的同时,守住安全底线。

开源 free 基础设施
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 131
维护状态 低维护
是否开源
定价模式 free

项目数据

分类基础设施
开发团队trylonai
所属国家
定价模式free
价格说明开源项目,自托管部署,完全免费。
访问状态
是否开源
开源协议NOASSERTION
主要语言Python
技术栈/模型ai-gateway,ai-safety,content-moderation,llm-firewall,llm-guardrails,llm-security,pii-redaction,prompt-injection,self-hosted
GitHub 星标★ 131
30天Star增速
HF 下载量
上线时间2025-06-12 00:00:00
最近更新2026-09-13 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数5

使用教程

核心亮点

  • 提供可编程的护栏,灵活定义内容过滤规则
  • 统一网关入口,简化多模型接入和密钥管理
  • 自托管部署,数据不出内网,隐私可控

不足之处

  • 项目处于早期,文档和社区生态尚待完善
  • 功能边界与主流 API 网关有重叠,需评估集成成本

适用场景

  • 企业内部 AI 应用的安全合规接入
  • 多模型统一管理,防止敏感数据泄露
  • 对 LLM 输出进行实时内容审核和拦截

替代项目

LiteLLM、OpenAI API Gateway、Portkey

项目介绍

gateway 是基础设施领域的开源项目,由 trylonai 开发,2025 年首次发布。

它收录于基础设施分类,该分类目前共有 1,130 个项目,GitHub 星标数为 131。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-13。自托管部署,完全免费。

它主要面向的使用场景是:企业内部AI应用的安全合规接入。同类可对比的替代方案包括 LiteLLM、OpenAI API Gateway、Portkey。

上一篇:llm-metadata

下一篇:voidllm

同类项目推荐

freebuff-proxy 开源

聚合多账号,一键接入 OpenAI 兼容 API,轻松管理会话。

Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···

★ 213 2026-08-20
microduck 开源

用 Rust 造一只会走路的桌面小鸭,快速上手双足机器人。

A Tiny biped duck robot

★ 8684 2026-09-10
soperator 开源

用 Kubernetes 原生方式运行 Slurm,简化 HPC 集群管理。

Run Slurm in Kubernetes

★ 439 2026-08-10
ollama 开源

一条命令本地跑起大模型,免费、私密、不卡顿

Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···

★ 181484 2026-08-09