wingman

统一管理所有 AI 模型调用,让推理服务更稳更可控

wingman 是一个面向大规模 AI 推理场景的 Inference Hub,用 Go 语言实现。它旨在解决 AI 模型部署和调用过程中的管理复杂性问题,为团队提供一个统一的入口来路由、管理和监控多个 AI 模型服务。核心能力包括:统一 API 网关,屏蔽不同模型提供商的接口差异;智能路由,根据负载、延迟等指标将请求分发到最优后端;以及集中式的流量监控和配额管理,帮助运维人员掌握推理服务的运行状态。项目处于早期阶段,定位是基础设施层组件,适合需要管理多个模型端点、追求高可用和可观测性的平台团队。

开源 free 基础设施
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 78
维护状态 活跃
是否开源 是
定价模式 free

项目数据

分类基础设施
开发团队adrianliechti
所属国家
官网地址
定价模式free
价格说明开源项目,MIT许可证,可自行部署,完全免费。
访问状态
是否开源是
开源协议MIT
主要语言Go
技术栈/模型ai-gateway,azure-openai,claude,function-calling,groq,llama,llamacpp,llm,mistral,ollama,openai,openai-api,rag
GitHub 星标★ 78
30天Star增速
HF 下载量
上线时间2023-09-07 00:00:00
最近更新2026-09-19 00:00:00
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数1

使用教程

核心亮点

  • Go 语言编写,部署简单,性能开销低
  • 提供统一入口,屏蔽多家模型 API 差异
  • 内置路由与监控,便于做负载均衡和故障转移

不足之处

  • 文档/社区待观察

适用场景

  • 企业内部统一管理多个云厂商或自建模型服务
  • 需要为多个业务团队提供集中式 AI 推理网关
  • 构建高可用推理架构,实现模型流量的灰度切换与降级

替代项目

LiteLLM、OpenRouter、Kong AI Gateway

项目介绍

wingman 是基础设施领域的开源项目,由 adrianliechti 开发,2023 年首次发布。

它收录于基础设施分类,该分类目前共有 1,132 个项目,GitHub 星标数为 78。

项目目前处于活跃维护状态,最近一次代码更新于 2026-09-19。MIT许可证,可自行部署,完全免费。

它主要面向的使用场景是:企业内部统一管理多个云厂商或自建模型服务。同类可对比的替代方案包括 LiteLLM、OpenRouter、Kong AI Gateway。

上一篇:Routerly

下一篇:gateway

同类项目推荐

freebuff-proxy 开源

聚合多账号,一键接入 OpenAI 兼容 API,轻松管理会话。

Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···

★ 213 2026-08-20
microduck 开源

用 Rust 造一只会走路的桌面小鸭,快速上手双足机器人。

A Tiny biped duck robot

★ 8684 2026-09-10
soperator 开源

用 Kubernetes 原生方式运行 Slurm,简化 HPC 集群管理。

Run Slurm in Kubernetes

★ 439 2026-08-10
ollama 开源

一条命令本地跑起大模型,免费、私密、不卡顿

Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···

★ 181484 2026-08-09