teracrawl

把任意网页变成干净 Markdown,喂给大模型,轻松搞定!

teracrawl 是一个专为大型语言模型(LLM)优化设计的高性能网页爬虫 API。它解决的核心问题是:LLM 应用需要从任意网站或搜索结果中提取干净、结构化的文本数据,而传统爬虫往往返回大量 HTML 标签、脚本和噪音内容,不利于模型直接使用。teracrawl 通过远程浏览器技术,将任意网页或搜索结果转换为干净的 Markdown 格式,确保内容简洁、语义清晰,便于 LLM 直接消费。其核心能力包括:高性能并发抓取、远程浏览器渲染(支持动态内容)、自动提取正文并转换为 Markdown、提供简单的 API 接口,可轻松集成到各类 AI 应用或数据管道中。作为 Firecrawl 的替代品,teracrawl 强调轻量、高效和易用,适合开发者快速构建基于网页内容的 AI 功能。

开源 unknown 搜索知识
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 285
维护状态 低维护
是否开源 是
定价模式 unknown

项目数据

分类搜索知识
开发团队BrowserCash
所属国家
定价模式unknown
价格说明定价信息待确认
访问状态
是否开源是
开源协议MIT
主要语言TypeScript
技术栈/模型ai-agents,ai-crawler,ai-scraping,ai-search,antibot-bypass,browser-agent,browser-automation,crawl4ai,data-extraction,firecrawl-alternative,firecrawl-api,firecrawl-mcp,google-serp,html-to-markdown,serpapi,web-scraper,web-scraping,web-search
GitHub 星标★ 285
30天Star增速
HF 下载量
上线时间2025-10-19 00:00:00
最近更新2026-09-19 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数1

使用教程

核心亮点

  • 专为 LLM 优化,输出干净 Markdown,省去清洗 HTML 的麻烦
  • 基于远程浏览器,能抓取动态渲染的页面,数据更完整
  • API 设计简洁,部署和使用门槛低,适合快速集成

不足之处

  • 项目早期,文档和社区生态尚不完善,需自行摸索
  • 依赖远程浏览器,可能带来额外资源消耗和延迟

适用场景

  • 为 RAG 应用抓取网页知识库,生成干净的文本语料
  • 批量采集搜索结果,用于市场分析或舆情监控
  • 将网站内容转换为 Markdown,供 AI 写作或摘要工具使用

替代项目

Firecrawl、Crawl4AI、Scrapy

项目介绍

teracrawl 是搜索知识领域的开源项目,由 BrowserCash 开发,2025 年首次发布。

它收录于搜索知识分类,该分类目前共有 585 个项目,GitHub 星标数为 285。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-19。

它主要面向的使用场景是:为RAG应用抓取网页知识库,生成干净的文本语料。同类可对比的替代方案包括 Firecrawl、Crawl4AI、Scrapy。

上一篇:moorcheh-python-sdk

下一篇:mango-finder

同类项目推荐

firecrawl 开源

网页抓取像喝水一样简单,开发者省下整周加班

The web data API to search, scrape, and interact at scale.

★ 183325 2026-08-09
contoso-chat 开源

一键跑通 Azure RAG 应用,从代码到评估部署全流程

This sample has the full End2End process of creating RAG application with Prompty an···

★ 766 2026-08-09
graphify 开源

整个代码库画成一张图,找问题一眼定位

Turn any codebase, with its docs, SQL schemas, configs, and PDFs, into a queryable k···

★ 120493 2026-08-09
ragflow 开源

让大模型用上你的私有知识,搭建可靠的企业级RAG应用

RAGFlow is a leading open-source Retrieval-Augmented Generation (RAG) engine that fu···

★ 91170 2026-08-09