dataset-viewer

不下载数据集,网页直接看样本和统计

开源 🏷️完全免费 🔌 仅提供 API 接口 数据集 🍴 复刻 141 🐛 待处理 192 👀 关注 30
GitHub ↗
GitHub 星标 ★ 907
维护状态 活跃
是否开源 开源
定价模式 🏷️完全免费 开源免费,作为Hugging Face平台基础设施提供

项目预览

dataset-viewer 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类数据集
开发团队huggingface
定价模式🏷️完全免费
价格说明开源免费,作为Hugging Face平台基础设施提供
访问状态🔌 仅提供 API 接口
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型api-rest,data,datasets,huggingface,machine-learning,nlp
GitHub 星标★ 907
上线时间2021-07-26 00:00:00
代码更新2026-11-04
仓库体积33.0 MB
本站数据更新2026-11-05
维护状态活跃
收录时间2026-09-21
浏览次数3

项目介绍

dataset-viewer 是 Hugging Face 官方开源的后端服务,为数据集页面上的在线预览功能提供公共 API。它解决的核心问题是:用户无需下载动辄数 GB 的数据集,就能直接在网页上查看数据集的字段结构、样本内容、分片信息和统计分布。核心能力包括:读取 Hugging Face Hub 上的数据集文件,自动解析 Parquet、CSV、JSON 等格式,生成分页预览接口;提供 /rows、/first-rows、/size、/statistics 等 REST 端点;支持数据集配置和分片选择;内置缓存与并发控制,支撑高流量访问。项目用 Python 编写,可独立部署,也可作为其他数据平台构建数据集预览功能的参考实现。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-09-21 · 当前星标 ★ 907

使用教程

⚠ 本教程由 AI 依据该项目 README 整理;原始文档不完整,部分步骤为通用流程推断,实际安装请以项目官方文档为准。

难度:进阶 约 15 分钟 部署方式:本地安装 4 步

⚠ 该项目 README 未提供完整安装说明,以下步骤为通用流程,请以官方文档为准。

环境要求

  • Node 18+

安装与启动步骤

  1. 1先看定位

    这是 Hugging Face 数据集页面的内部组件,不是开箱即用的独立产品。

  2. 2装依赖

    按仓库说明装 Node 依赖,构建产物用于嵌入主站。

  3. 3本地起服务

    开发模式下可独立预览表格视图,支持分页、筛选与统计。

  4. 4二次开发

    真正的价值是读它的表格虚拟化实现,可借鉴到自己项目。

如何确认成功

本地能渲染出一张示例数据表并翻页。

注意事项

  • 不提供对外 API,别当成数据集下载工具用。

核心亮点

  • 提供 /rows、/size、/statistics 等完整 REST API,可直接嵌入任意前端
  • 自动解析 Parquet/CSV/JSON 等多种格式,无需手动转换
  • Hugging Face 官方维护,与 Hub 数据集页面深度集成,稳定可靠

不足之处

  • 强依赖 Hugging Face Hub 生态,脱离 Hub 使用需自行适配存储层
  • 文档偏简略,本地部署和配置细节需要读源码摸索

适用场景

  • 在 Hugging Face 数据集页面实现样本在线预览
  • 为内部数据平台搭建数据集浏览与统计服务
  • 快速检查公开数据集的内容和字段结构,避免全量下载

替代项目

datasette、streamlit

上一篇:vega-datasets

下一篇:datasets

同类项目推荐

iam-dataset 开源

一份数据打通 AWS/Azure/GCP 的 IAM 权限,省去手工爬取

A consolidated series of structured data for cloud identity and access management sy···

★ 334 2026-09-21
somali-language-standard 开源

给索马里语定一套机器可读的版本化标准,让低资源 NLP 有据可依。

The open, machine-readable standard for the Somali language — orthography, grammar,···

★ 109 2026-09-12
solt 开源

轻量流式数据变换,让图像增强更高效

Streaming over lightweight data transformations

★ 269 2026-08-12
crackmes-re-dataset 开源

4598个crackme带答案和混淆标签,逆向研究直接开跑

Labeled reverse-engineering dataset over 4,598 crackmes: flags, verifier scripts, an···

★ 147 2026-09-21
colour 开源

搞定色彩转换与科学计算,让颜色处理更专业

Colour Science for Python

★ 2683 2026-08-10
IEPile 开源

用2000万条高质量数据,让大模型更懂信息抽取。

[ACL 2024] IEPile: A Large-Scale Information Extraction Corpus

★ 214 2026-08-09
the_well 开源

15TB 多物理场仿真数据,开箱即用训练科学大模型

A 15TB Collection of Physics Simulation Datasets

★ 4534 2026-10-19