litellm-pgvector

把 LiteLLM 日志变成可搜索的向量库,快速挖掘调用模式

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 基础设施 🍴 复刻 50 🐛 待处理 10 👀 关注 2
GitHub ↗
GitHub 星标 ★ 91
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,可免费使用和部署。

项目预览

litellm-pgvector 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类基础设施
开发团队BerriAI
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,可免费使用和部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型ai-gateway,litellm,litellm-ai-gateway,openai-vector-store,vector-store,vector-store-gateway
GitHub 星标★ 91
上线时间2025-07-16 00:00:00
代码更新2026-10-06
仓库体积10 KB
本站数据更新2026-11-09
维护状态维护中
收录时间2026-08-09
浏览次数6

项目介绍

litellm-pgvector 是一个将 LiteLLM 的请求日志与向量数据库 pgvector 集成的开源项目。它解决了 LiteLLM 默认日志存储无法支持语义检索和向量化分析的问题,使得开发者能够基于请求内容(如提示词、响应)进行相似性搜索、异常检测和成本分析。核心能力包括:自动将 LiteLLM 的调用日志写入 PostgreSQL 的 pgvector 扩展,支持向量化嵌入(通过 OpenAI 或本地模型),提供简单的 Python API 用于查询和检索历史请求,并可与现有 LiteLLM 部署无缝对接。项目处于早期阶段,代码简洁,适合需要深度分析 LLM 调用行为的团队。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 91

技术标签

核心亮点

  • 直接复用 pgvector,无需额外向量数据库,降低运维成本
  • 自动嵌入日志内容,支持语义检索,方便调试和审计
  • 与 LiteLLM 集成简单,几行代码即可启用

不足之处

  • 文档/社区待观察
  • 依赖外部嵌入模型,可能增加额外 API 成本
  • 仅支持 PostgreSQL,限制了数据库选择

适用场景

  • 对 LLM 调用日志进行语义搜索,快速定位相似问题
  • 分析用户提示词趋势,优化提示模板
  • 构建基于历史调用的异常检测或成本分析工具

替代项目

Langfuse、Helicone、Wandb Weave

上一篇:AI-Worker-Proxy

下一篇:Routerly

同类项目推荐

pasllm 开源

在 Pascal 里跑大模型,让 Delphi/Lazarus 也能做 AI 对话。

PasLLM - LLM inference engine in Object Pascal (synced from my private work reposito···

★ 109 2026-08-09
gateway 开源

搭建AI应用后端,统一管理模型调用与流量

[deprecated] AI Gateway - core infrastructure stack for building production-ready AI···

★ 162 2026-08-09
llmtrace 开源

零代码给 OpenAI API 加安全盾,实时防注入、扫隐私、控成本

Zero-code LLM security & observability proxy. Real-time prompt injection detection, ···

★ 54 2026-08-09
Memori 开源

给 AI 装上持久记忆,让智能体不再失忆

Memori is agent-native memory infrastructure. A LLM-agnostic layer that turns agent ···

★ 17485 2026-08-09
wingman 开源

统一管理所有 AI 模型调用,让推理服务更稳更可控

Inference Hub for AI at Scale

★ 81 2026-08-09
GPTCache 开源

给 LLM 加个语义缓存,重复问题秒回,省钱又提速

Semantic cache for LLMs. Fully integrated with LangChain and llama_index.

★ 8222 2026-08-09
OGAD 开源

断网也能用AI,一个网关搞定本地模型全家桶

Your private, on-device personal AI assistant for macOS and Windows. Chat, create, s···

★ 144 2026-08-09
openeverest 开源

在 K8s 上一键自动创建和管理多种数据库

OpenEverest is an open-source platform for automated database, storage and LLMs prov···

★ 964 2026-09-16
infermux 开源

看清跨云路由路径,优化网络调度

Route inference across providers.

★ 93 2026-08-09