awesome-open-source-data-engineering

一张清单，搞定数据工程选型

这是一个精选开源数据工程工具列表，旨在帮助数据工程师和分析平台构建者快速找到合适的开源组件。项目按功能分类整理了数据摄取、存储、处理、查询、调度、可视化等环节的工具，每个工具附有简介和链接。它解决了数据工程领域工具繁多、选型困难的问题，为从业者提供了一份结构化的参考指南。核心能力在于其系统性的分类和持续更新的社区维护，方便用户按需检索。

开源 free 基础设施
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 605
维护状态 低维护
是否开源 是
定价模式 free

项目数据

分类基础设施
开发团队pracdata
所属国家
官网地址
GitHubhttps://github.com/pracdata/awesome-open-source-data-engineering
定价模式free
价格说明开源工具列表，全部免费，无付费版本。
访问状态
是否开源是
开源协议
主要语言
技术栈/模型analytics,awesome,awesome-list,data,data-analytics,data-engineering,data-integration,data-lakehouse,data-pipeline,data-platform,data-storage,data-warehouse,database,datalake,etl,lakehouse,mlops,observability,self-hosted,workflow-engine
GitHub 星标★ 605
30天Star增速
HF 下载量
上线时间2024-02-22 00:00:00
最近更新2026-09-10 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数4

使用教程

核心亮点

  • 分类清晰，覆盖数据工程全链路，便于按需查找
  • 社区维护，持续收录新工具，保持时效性
  • 每个工具附有简介和链接，降低调研成本

不足之处

  • 仅提供列表，缺乏工具对比和深度评测
  • 文档/社区待观察

适用场景

  • 数据平台架构设计时选型参考
  • 数据工程师寻找特定环节的开源替代方案
  • 技术调研和趋势分析

替代项目

awesome-data-engineering、data-engineering-howto、awesome-bigdata

项目介绍

awesome-open-source-data-engineering 是基础设施领域的开源项目，由 pracdata 开发，2024 年首次发布。

它收录于基础设施分类，该分类目前共有 1,132 个项目，GitHub 星标数为 605。

项目已超过三个月没有代码更新，维护节奏明显放缓，最近一次代码更新于 2026-09-10。开源工具列表，全部免费，无付费版本。

它主要面向的使用场景是：数据平台架构设计时选型参考。同类可对比的替代方案包括 awesome-data-engineering、data-engineering-howto、awesome-bigdata。

上一篇：kubernetes-for-ml-engineers

下一篇：hopsworks

同类项目推荐

freebuff-proxy 开源

聚合多账号，一键接入 OpenAI 兼容 API，轻松管理会话。

Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···

★ 213 2026-08-20
microduck 开源

用 Rust 造一只会走路的桌面小鸭，快速上手双足机器人。

A Tiny biped duck robot

★ 8684 2026-09-10
soperator 开源

用 Kubernetes 原生方式运行 Slurm，简化 HPC 集群管理。

Run Slurm in Kubernetes

★ 439 2026-08-10
ollama 开源

一条命令本地跑起大模型，免费、私密、不卡顿

Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···

★ 181484 2026-08-09