searcharvester

自建 AI 搜索+抓取 API,一键替代 Tavily

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 搜索知识 🍴 复刻 44 🐛 待处理 9 👀 关注 5
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 282
维护状态 维护中
是否开源 开源
定价模式 🏷️完全免费 开源项目,AGPL-3.0许可,可自行部署,无付费版本。

项目预览

searcharvester 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类搜索知识
开发团队vakovalskii
定价模式🏷️完全免费
价格说明开源项目,AGPL-3.0许可,可自行部署,无付费版本。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议AGPL-3.0
主要语言Python
技术栈/模型agentic-ai,ai-agents,docker-compose,fastapi,llm,llm-tools,markdown,rag,search-api,searxng,self-hosted,tavily,trafilatura,web-scraping
GitHub 星标★ 282
上线时间2025-09-11 00:00:00
代码更新2026-09-30
仓库体积1.8 MB
本站数据更新2026-11-10
维护状态维护中
收录时间2026-08-09
浏览次数2

项目介绍

searcharvester 是一个面向 AI 代理的自托管搜索与网页内容抓取服务,将 SearXNG 的 100+ 搜索引擎聚合能力与 trafilatura 的正文提取能力整合为统一的 API。它提供与 Tavily 兼容的 /search 和 /extract 接口,支持内容大小预设和分页,方便 AI 代理快速获取结构化搜索结果和干净的网页正文。项目通过 Docker Compose 一键部署,解决了 AI 应用在搜索和抓取环节对第三方付费 API 的依赖,同时保证了数据隐私和可控性。核心能力包括多引擎搜索聚合、正文提取、API 兼容层和简单部署,适合需要自建搜索基础设施的 AI 应用开发者。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 282

核心亮点

  • 兼容 Tavily 的 /search 和 /extract 接口,迁移成本低
  • 基于 SearXNG 聚合 100+ 搜索引擎,结果覆盖面广
  • Docker Compose 一键部署,自带完整服务栈

不足之处

  • 早期项目,文档和社区生态待观察
  • 依赖 SearXNG 实例,需自行维护搜索质量

适用场景

  • AI 代理需要实时搜索和网页内容提取
  • 自托管搜索 API 以降低第三方依赖和成本
  • 构建私有知识库或 RAG 系统的数据采集层

替代项目

Tavily、SearXNG、Firecrawl

上一篇:rag-chat

下一篇:LongRAG

同类项目推荐

Novel-Assistant 开源

让本地文档秒变智能问答库,随问随答

로컬 또는 클라우드 LLM을 사용해 문서 폴더 기반으로 검색·답변하는 RAG 어시스턴트

★ 59 2026-08-09
R2R 开源

一键部署生产级智能检索,让 RAG 应用开箱即用

SoTA production-ready AI retrieval system. Agentic Retrieval-Augmented Generation (R···

★ 8075 2026-08-09
ontosmith 开源

从文档构建可追溯、可审计的知识图谱

A decision-model-based ontology & knowledge-graph builder — builds governed knowled···

★ 260 2026-11-08
gemini-obsidian 开源

在终端里用 Gemini 问答你的 Obsidian 笔记库

A Gemini CLI extension for interfacing with an Obsidian vault with local first RAG c···

★ 102 2026-10-25
googlegpt 开源

在 Google 搜索页直接调用 AI 生成摘要和对话,省去切换标签页的麻烦。

AI chat & search summaries in Google Search, powered by the latest LLMs

★ 183 2026-08-09
edgequake 开源

用 Rust 把文档变成知识图谱,让 AI 检索更聪明

EdegQuake High-performance GraphRAG inspired from LightRag written in Rust; Transfo···

★ 2299 2026-08-09
fojin 开源

一站式检索万部佛典,AI 问答直达经义

Buddhist Digital Text Platform — 10,500+ texts, 613 sources, trilingual cross-canon···

★ 359 2026-08-09
cloudflare-rag 开源

上传 PDF,即刻在 Cloudflare 边缘开启智能问答

Fullstack "Chat with your PDFs" RAG (Retrieval Augmented Generation) app built fully···

★ 609 2026-08-09