leanctx

不换代码,一键压缩提示词,立省 40-60% token 费用

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 搜索知识 🍴 复刻 7 🐛 待处理 1 👀 关注 1
GitHub ↗
GitHub 星标 ★ 320
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

leanctx 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类搜索知识
开发团队jia-gao
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型anthropic,cost-optimization,gemini,langchain,langgraph,llm,llm-inference,llmlingua,openai,prompt-compression,python,rag
GitHub 星标★ 320
上线时间2026-04-18 00:00:00
代码更新2026-08-22
仓库体积793 KB
本站数据更新2026-11-09
维护状态维护中
收录时间2026-08-09
浏览次数5

项目介绍

leanctx 是一个用于生产环境 LLM 应用的即插即用提示词压缩工具。它基于 LLMLingua-2 模型,通过智能压缩提示词中的冗余内容,帮助开发者在不修改现有代码的前提下,将 token 消耗降低 40-60%,从而显著减少 API 调用成本。项目提供 Python SDK,集成简单,只需几行代码即可在现有 LLM 应用中加入压缩层。它解决了长提示词带来的高额费用和延迟问题,特别适合处理包含大量上下文、历史记录或文档片段的场景。核心能力包括高压缩比、保持语义完整性、低延迟处理,以及灵活的配置选项,可适应不同应用需求。作为早期项目,它已获得 316 个星标,展现出不错的社区关注度。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 320

核心亮点

  • 即插即用,几行代码集成,无需改动现有 LLM 调用逻辑
  • 基于 LLMLingua-2 模型,压缩比高且能保持语义完整
  • 可显著降低 token 费用和推理延迟,适合成本敏感的生产环境

不足之处

  • 早期项目,API 和稳定性可能随版本变化
  • 压缩效果依赖输入内容类型,对某些特定格式可能不理想
  • 文档和社区生态尚待完善

适用场景

  • 生产环境 LLM API 调用,降低 token 成本
  • 长上下文场景(如文档问答、聊天历史)压缩
  • 批量处理大量提示词,优化资源消耗

替代项目

LLMLingua、PromptCompress、LangChain 的 Prompt 优化模块

上一篇:VecturaKit

下一篇:reader

同类项目推荐

orbit 开源

自建私有 AI 网关,用自然语言安全访问数据与工具

Self-hosted AI gateway for private RAG, natural-language data access, and tool-calli···

★ 361 2026-08-09
vllm-backport 开源

让旧显卡也能跑新版 vLLM 推理

Dogfooding vLLM backport for older GPUs.

★ 359 2026-10-14
llm-inference-handbook 开源

一册看懂 LLM 推理全流程,选型调优不再靠猜

Everything you need to know about LLM inference

★ 477 2026-09-16
thepipe 开源

用视觉大模型,把复杂文档秒变干净数据

Get clean data from tricky documents, powered by vision-language models ⚡

★ 1529 2026-08-09
destructive_command_guard 开源

给 AI 智能体装上安全锁,防止误删误推毁仓库。

A fast Rust safety hook that blocks destructive shell, git, and filesystem commands ···

★ 6309 2026-08-09
babylog 开源

生产环境轻量记录图像和预测,快速排查模型问题

A lightweight logger for machine learning teams to log images and predictions in pro···

★ 153 2026-08-09
OlliteRT 开源

把安卓手机变成本地 OpenAI 接口推理服务器

Turn your Android phone into an OpenAI-compatible LLM inference server - Fully local···

★ 625 2026-11-06
ServerlessLLM 开源

把大模型部署变成按需调用的无服务器服务,省钱又省心

Serverless LLM Serving for Everyone.

★ 717 2026-08-09
stable-diffusion-rocm-docker 开源

AMD显卡用户,一条命令跑起Stable Diffusion

Stable Diffusion Docker image preconfigured for usage with AMD Radeon cards

★ 146 2026-08-09