项目预览
项目数据
项目介绍
Star 增长趋势
本站每日记录该项目 GitHub 星标变化，观测越久曲线越完整
数据来源：GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 289
核心亮点
- 专为 LLM 优化，输出干净 Markdown，省去清洗 HTML 的麻烦
- 基于远程浏览器，能抓取动态渲染的页面，数据更完整
- API 设计简洁，部署和使用门槛低，适合快速集成
不足之处
- 项目早期，文档和社区生态尚不完善，需自行摸索
- 依赖远程浏览器，可能带来额外资源消耗和延迟
适用场景
- 为 RAG 应用抓取网页知识库，生成干净的文本语料
- 批量采集搜索结果，用于市场分析或舆情监控
- 将网站内容转换为 Markdown，供 AI 写作或摘要工具使用
替代项目
Firecrawl、Crawl4AI、Scrapy
下一篇：mango-finder
同类项目推荐
geo-optimizer-skill
开源
让ChatGPT和Gemini在回答中主动引用你的网站
GEO Optimizer, the open-source engine behind GeoReady (geoready.dev): audit whether ···
album-ai
开源
跟相册聊天，用大白话找照片，AI 自动理解内容
AI-First Album: Chat with your gallery using plain language! LLM Vision + RAG + Albu···
obsidian-llm-wiki
开源
笔记和PDF自动变知识图谱，还能问答
Karpathy's LLM Wiki implementation plugin for Obsidian - turns notes and PDFs into a···
rag-chat
开源
快速搭建检索增强对话原型，验证 RAG 想法。
Prototype SDK for RAG development.
chatgpt-knowledge-base-chatbot
开源
上传你的数据，即刻拥有专属ChatGPT问答机器人
An advanced chatbot that utilizes your own data to provide intelligent ChatGPT-style···
webgrep
开源
把网页脚本、样式、图片里的线索一键抓出来搜
Grep Web pages with extra features like JS deobfuscation and OCR
open-deep-research
开源
给个主题，开源模型自动查资料写报告
The Open Deep Research app – generate reports with OSS LLMs
PapersChat
开源
和你的论文对话，还能顺手查遍 ArXiv 和 PubMed
An agentic AI application that allows you to chat with your papers and gather also i···
flock
开源
在 DuckDB 里用 SQL 直接跑大模型和 RAG 检索
Beyond Quacking: Deep Integration of Language Models and RAG into DuckDB (VLDB Demo ···