llm-reader
一键把网页变成 LLM 能读懂的干净文本，RAG 抓取更省心。
项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整
数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 315
核心亮点
- 输出格式针对 LLM 优化，直接减少 token 浪费，提升 RAG 检索质量
- 支持图片和链接提取，保留关键上下文，不丢失网页中的多模态信息
- 自托管部署，数据不出内网，相比第三方 API 更安全可控
不足之处
- 早期项目，功能迭代和稳定性有待验证
- 文档/社区待观察
适用场景
- 构建 RAG 知识库时，批量抓取网页并清洗为纯文本
- AI 爬虫中需要将动态或复杂网页转为结构化文本供模型分析
- 个人或企业内网部署，避免将网页内容发送给外部 API
替代项目
Firecrawl、Jina Reader、Trafilatura
同类项目推荐
RAG-QA-Generator
开源
自动从文档生成问答对，快速搭建 RAG 知识库
RAG-QA-Generator 是一个用于检索增强生成（RAG）系统的自动化知识库构建与管理工具。该工···
CrawlAI-RAG
开源
把整个网站变成能聊天的知识库，问啥答啥
CrawlAI RAG is an AI-powered website intelligence platform that allows users to craw···
trieve
开源
一个 API 搞定搜索、推荐和 RAG，快速构建智能应用
All-in-one platform for search, recommendations, RAG, and analytics offered via API
aisearch-openai-rag-audio
开源
用语音对话你的私有知识库，基于Azure AI Search和GPT-4o实时问答
A simple example implementation of the VoiceRAG pattern to power interactive voice g···
geo-optimizer-skill
开源
让ChatGPT和Gemini在回答中主动引用你的网站
GEO Optimizer, the open-source engine behind GeoReady (geoready.dev): audit whether ···
Awesome-Trustworthy-RAG
开源
做可信RAG的论文工具清单，少走弯路
code-graph-rag
开源
用知识图谱让AI读懂你的大型代码库，查询、理解、改代码更精准
The ultimate RAG for your monorepo. Query, understand, and edit multi-language codeb···
textbook-to-note
开源
把 PDF 教材变成可搜索、带引用的 AI 笔记
Turn your own PDF textbooks into an AI-searchable knowledge base and structured, ful···
local-LLM-with-RAG
开源
本地跑大模型，私有文档秒变智能问答助手
Running local Language Language Models (LLM) to perform Retrieval-Augmented Generati···