Scrapegraph-demo

用大白话问网页要数据,不用写爬虫代码

Scrapegraph-demo 是一个基于 Streamlit 构建的演示应用,用于展示 Scrapegraph-ai 库的功能。Scrapegraph-ai 是一个结合大语言模型(如 GPT-4)与网页爬虫的 Python 库,允许用户通过自然语言指令来提取网页中的结构化数据。该 demo 主要面向 GPT-4 黑客松场景,旨在快速演示如何利用自然语言描述需求,自动生成爬虫逻辑并返回所需信息(如文本、表格、JSON 等)。它解决了传统爬虫需要编写复杂选择器或正则表达式的问题,降低了网页数据提取的门槛。核心能力包括:自然语言交互、基于 LLM 的智能解析、支持动态网页渲染(通过 Playwright)、以及简单的 Web 界面。该项目处于早期阶段,代码量小,适合学习或作为二次开发的起点。

开源 free 搜索知识
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 116
维护状态 活跃
是否开源
定价模式 free

项目数据

分类搜索知识
开发团队ScrapeGraphAI
所属国家
定价模式free
价格说明开源项目,MIT许可证,可免费使用和部署。
访问状态
是否开源
开源协议MIT
主要语言Python
技术栈/模型llm,openai-hackathon,rag,streamlit
GitHub 星标★ 116
30天Star增速
HF 下载量
上线时间2024-02-20 00:00:00
最近更新2026-09-20 00:00:00
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3

使用教程

核心亮点

  • 自然语言驱动,无需手写 CSS 选择器或正则,降低爬虫使用门槛
  • 基于 Streamlit 构建,界面直观,便于快速演示和交互
  • 集成 Scrapegraph-ai,支持动态网页渲染,适应现代网站

不足之处

  • 文档/社区待观察
  • 依赖外部 LLM API(如 GPT-4),运行成本较高且受限于网络

适用场景

  • 黑客松或技术演示,快速展示 AI 爬虫能力
  • 非技术人员临时提取网页数据,如市场调研、竞品分析
  • 教学场景,演示 LLM 与爬虫结合的原理

替代项目

Scrapegraph-ai、ScrapeStorm、Browse AI

项目介绍

Scrapegraph-demo 是自动化工作流领域的开源项目,由 ScrapeGraphAI 开发,2024 年首次发布。

它收录于自动化工作流分类,该分类目前共有 503 个项目,GitHub 星标数为 116。

项目目前处于活跃维护状态,最近一次代码更新于 2026-09-20。MIT许可证,可免费使用和部署。

它主要面向的使用场景是:黑客松或技术演示,快速展示AI爬虫能力。同类可对比的替代方案包括 Scrapegraph-ai、ScrapeStorm、Browse AI。

上一篇:bookmarksAI

下一篇:wxpath

同类项目推荐

n8n 开源

拖拽搭建自动化流程,轻松接入 AI 与 400+ 应用,搞定重复工作。

Fair-code workflow automation platform with native AI capabilities. Combine visual b···

★ 205700 2026-08-10
feishu-docx 开源

让 AI 代理轻松读写飞书文档,双向转换 Markdown

Feishu/Lark Docs、Sheet、Bitable <-> Markdown | AI Agent-friendly knowledge base exp···

★ 261 2026-08-09
robotcode 开源

让 Robot Framework 拥有现代 IDE 体验,调试、补全、运行一气呵成。

Open Source Toolkit for Robot Framework, providing Language Server Protocol support,···

★ 300 2026-08-10
puppeteer 开源

用 JavaScript 轻松操控无头浏览器,搞定自动化测试与网页抓取。

JavaScript API for Chrome and Firefox

★ 95609 2026-08-10