awesome-public-streaming-datasets

找实时数据源不再靠搜,一页清单直接接入流处理

awesome-public-streaming-datasets 是一个精选清单型开源项目,专门收集和整理提供流式数据(streaming data)的免费公开数据集。它解决的核心问题是:做实时计算、流处理、事件驱动系统或在线机器学习时,开发者常常找不到稳定、可公开访问的实时数据源,只能自己造模拟数据,导致测试和演示脱离真实场景。该项目把分散在互联网上的公开流式数据源汇总到一处,覆盖金融行情、社交媒体、物联网传感器、天气、交通、日志等多种领域,并给出每个数据源的访问方式、协议、是否免费等关键信息。核心能力是索引与分类,帮助开发者快速定位适合自己技术栈(如 Kafka、Flink、Spark Streaming)的数据源,从而加速原型验证、教学演示和基准测试。项目本身不托管数据,只做导航,因此轻量、易维护,适合作为流处理学习与选型的入口。

开源 free 数据集
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 457
维护状态 较活跃
是否开源 是
定价模式 free

项目预览

项目数据

分类数据集
开发团队ColinEberhardt
所属国家
官网地址
定价模式free
价格说明免费开源数据集列表
访问状态
是否开源是
开源协议
主要语言
技术栈/模型
GitHub 星标★ 457
30天Star增速
HF 下载量
上线时间2018-12-07 00:00:00
代码更新—
仓库体积—
本站数据更新—
维护状态较活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-10-04
浏览次数0

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

正在加载星标数据…

技术标签

使用教程

—

核心亮点

  • 按领域分类整理,金融、社交、IoT、天气等一目了然
  • 每个数据源标注访问方式与是否免费,选型成本低
  • 纯清单项目,无依赖、无部署,克隆即可查阅

不足之处

  • 仅做链接汇总,不提供数据可用性监控或失效标注
  • 项目更新依赖社区提交,部分链接可能随时间失效

适用场景

  • 搭建 Flink/Kafka 实时管道时寻找真实测试数据源
  • 高校流处理课程中为学生提供可公开访问的演示数据
  • 做实时监控或异常检测原型时快速接入外部事件流

替代项目

awesome-streaming、public-apis

项目介绍

awesome-public-streaming-datasets 是数据集领域的开源项目,由 ColinEberhardt 开发,2018 年首次发布。

它收录于数据集分类,该分类目前共有 294 个项目,GitHub 星标数为 457。

项目保持着较活跃的维护节奏,最近一次代码更新于 2026-09-24。免费开源数据集列表。

它主要面向的使用场景是:搭建Flink/Kafka实时管道时寻找真实测试数据源。同类可对比的替代方案包括 awesome-streaming、public-apis。

同类项目推荐

X-AnyLabeling 开源

一站式AI辅助标注,图像视频文本通吃,导出格式随心配

X-AnyLabeling: A lightweight, efficient, and unified cross-platform desktop applicat···

★ 10592 2026-08-10
aisheets 开源

像用表格一样批量调 AI,不写代码就能造和改数据集

Build, enrich, and transform datasets using AI models with no code

★ 1647 2026-09-20
DataGen 开源

用大模型一键生成定制化训练数据,告别数据荒

[ICLR'25] DataGen: Unified Synthetic Dataset Generation via Large Language Models

★ 69 2026-08-09
distilabel 开源

基于论文的合成数据流水线,快速生成高质量 AI 反馈数据。

Distilabel is a framework for synthetic data and AI feedback for engineers who need ···

★ 3403 2026-08-10