Scrapegraph-demo

用大白话问网页要数据,不用写爬虫代码

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 搜索知识 🍴 复刻 121 👀 关注 2
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 120
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,可免费使用和部署。

项目预览

Scrapegraph-demo 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类搜索知识
开发团队ScrapeGraphAI
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,可免费使用和部署。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型llm,openai-hackathon,rag,streamlit
GitHub 星标★ 120
上线时间2024-02-20 00:00:00
代码更新2026-11-08
仓库体积2.1 MB
本站数据更新2026-11-10
维护状态活跃
收录时间2026-08-09
浏览次数4

项目介绍

Scrapegraph-demo 是一个基于 Streamlit 构建的演示应用,用于展示 Scrapegraph-ai 库的功能。Scrapegraph-ai 是一个结合大语言模型(如 GPT-4)与网页爬虫的 Python 库,允许用户通过自然语言指令来提取网页中的结构化数据。该 demo 主要面向 GPT-4 黑客松场景,旨在快速演示如何利用自然语言描述需求,自动生成爬虫逻辑并返回所需信息(如文本、表格、JSON 等)。它解决了传统爬虫需要编写复杂选择器或正则表达式的问题,降低了网页数据提取的门槛。核心能力包括:自然语言交互、基于 LLM 的智能解析、支持动态网页渲染(通过 Playwright)、以及简单的 Web 界面。该项目处于早期阶段,代码量小,适合学习或作为二次开发的起点。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 120

技术标签

核心亮点

  • 自然语言驱动,无需手写 CSS 选择器或正则,降低爬虫使用门槛
  • 基于 Streamlit 构建,界面直观,便于快速演示和交互
  • 集成 Scrapegraph-ai,支持动态网页渲染,适应现代网站

不足之处

  • 文档/社区待观察
  • 依赖外部 LLM API(如 GPT-4),运行成本较高且受限于网络

适用场景

  • 黑客松或技术演示,快速展示 AI 爬虫能力
  • 非技术人员临时提取网页数据,如市场调研、竞品分析
  • 教学场景,演示 LLM 与爬虫结合的原理

替代项目

Scrapegraph-ai、ScrapeStorm、Browse AI

上一篇:bookmarksAI

下一篇:wxpath

同类项目推荐

terramate 开源

不改 Terraform 代码,就能编排多环境 IaC 并检测漂移

Open-source Infrastructure as Code (IaC) orchestration platform: GitOps workflows, o···

★ 3649 2026-09-24
camofox-browser 开源

AI 爬虫的隐形斗篷,轻松绕过反爬,采集不再被拦。

Stealth headless browser for AI agents — bypass Cloudflare, bot detection, and anti···

★ 12215 2026-08-09
jacobo-workflows 开源

导入即用,快速搭建 WhatsApp 和语音 AI 客服工作流

7 production n8n workflows from Jacobo, a multi-agent AI system (WhatsApp + Voice). ···

★ 169 2026-08-28
BrowserGym 开源

把浏览器变成 Gym 环境,让 LLM 智能体边玩边学会操作网页

BrowserGym, a Gym environment for web task automation

★ 1435 2026-10-08
dsh-antibrow 开源

给 AI Agent 一个不被识破、身份能长期存活的浏览器

DeepSeek Harness plugin: give your agent a browser with a persistent identity - engi···

★ 12 2026-09-15
ego-lite 开源

让 AI 代理用你的浏览器干活,零配置不打扰

The fastest browser for AI agents to run browser automation, built for sharing your ···

★ 22265 2026-08-09
gptfree-register 开源

跳过接码,自动注册 ChatGPT 账号并导入 sub2api

ChatGPT协议注册机,支持跳过接码并自动导入sub2api

★ 130 2026-08-09
workflow 开源

用 TypeScript 轻松构建可靠、可观测的 AI 工作流

Workflow SDK: Build durable, reliable, and observable apps and AI Agents in TypeScri···

★ 2500 2026-08-09