html-get

一行代码抓任意网页 HTML,自动渲染纠错还快

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 自动化工作流 🍴 复刻 11 👀 关注 3
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 102
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费

项目预览

html-get 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类自动化工作流
开发团队microlinkhq
定价模式🏷️完全免费
价格说明开源免费
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言JavaScript
技术栈/模型audio,fetch,get,got,headless,html,image,markup,pdf,prerender,request,video
GitHub 星标★ 102
上线时间2018-06-26 00:00:00
代码更新2026-11-02
仓库体积3.1 MB
本站数据更新2026-11-02
维护状态活跃
收录时间2026-09-16
浏览次数4

项目介绍

html-get 是一个 JavaScript 库,用于从任意网站抓取 HTML 内容,并针对纠错与速度做了专门优化。它解决的核心问题是:普通 fetch 或 request 只能拿到原始响应,遇到需要 JavaScript 渲染、重定向、编码异常或结构损坏的页面时容易失败。html-get 内置了 headless 浏览器预渲染能力,能处理动态页面,同时支持抓取图片、音频、视频、PDF 等资源类型,并自动修正不规范的 HTML 标记。项目基于 got 等成熟请求库构建,API 简洁,适合需要稳定获取网页源码的自动化流程。它面向爬虫、内容聚合、页面快照、SEO 分析等场景,让开发者不必自己处理渲染与容错细节,直接拿到可用的 HTML 结果。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-16 · 当前星标 ★ 102

技术标签

核心亮点

  • 内置 headless 预渲染,能抓取依赖 JavaScript 动态生成的页面内容
  • 对不规范 HTML 做自动纠错,输出更干净可解析的标记
  • 基于 got 等成熟库,支持图片、音视频、PDF 等多种资源类型抓取

不足之处

  • 星标仅 103,属于早期项目,社区生态和长期维护待观察
  • 文档与示例相对有限,复杂场景需自行阅读源码

适用场景

  • 爬虫或内容聚合时批量获取网页 HTML 源码
  • 对动态渲染页面做快照或 SEO 结构分析
  • 自动化流程中需要稳定抓取并修正网页标记

替代项目

puppeteer、playwright、cheerio

上一篇:dsh-tabbit

下一篇:research-units-pipeline-skills

同类项目推荐

aidevops 开源

让 AI 智能体 24/7 自动搞定代码审查和运维,你只管写代码。

Vibe-Coding is easy. DevOps is hard. OpenCode & Git token-efficient AI agent automat···

★ 436 2026-08-09
EVE-Online-Bot 开源

用 AI 看屏幕玩 EVE,自动采矿战斗

A Bot to play Eve Online leveraging various methods including popular machine learni···

★ 136 2026-09-14
Interceptor 开源

用命令行或AI指令,直接操控浏览器完成一切操作

Browser automation and computer use for AI agents. One CLI and MCP server for your s···

★ 591 2026-08-09
conductor 开源

用命令行编排多个 AI 智能体,几步跑通协作流程

A CLI tool for defining and running multi-agent workflows with the GitHub Copilot SD···

★ 487 2026-09-15
TagUI 开源

用大白话写自动化,让 RPA 不再高门槛

Free RPA tool by AI Singapore

★ 6341 2026-08-10
computer-use-linux 开源

让 AI 智能体直接操控 Linux 桌面,跨应用自动干活

Native Linux desktop control for AI agents (MCP, Pi, CLI) — semantic AT-SPI trees, ···

★ 788 2026-09-16
awesome-claude-plugins 开源

自动追踪 Claude Code 插件热度,帮你挑出真正好用的插件

Automated index of Claude Code plugins and adoption metrics across GitHub repositori···

★ 1516 2026-09-20
blender-ai-mcp-addon 开源

在 Blender 里用聊天指挥 AI 改场景、写 bpy 脚本

AI assistant and MCP server for Blender: visual chat, scene tools, multi-agent workf···

★ 976 2026-10-19
ChatGPT-ShellMaster 开源

用聊天对话直接操控你的命令行,让 AI 帮你跑命令、管文件。

ChatGPT ShellMaster enables command-line interactions via chat using OpenAI's ChatGP···

★ 60 2026-08-09