build-and-deploy-real-time-feature-pipeline

用Python快速搭建实时特征管道,让模型用上最新数据。

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 基础设施 🍴 复刻 18 👀 关注 3
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 137
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

build-and-deploy-real-time-feature-pipeline 项目界面预览图
图片来源:项目官网

项目数据

分类基础设施
开发团队Paulescu
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型bytewax,feature-engineering,hopsworks,ml,mlops,python,realtime,streamlit
GitHub 星标★ 137
上线时间2023-06-29 00:00:00
代码更新2023-07-04
仓库体积358 KB
本站数据更新2026-11-07
维护状态低维护
收录时间2026-08-09
浏览次数5

项目介绍

这是一个用Python构建和部署实时特征管道的开源项目,旨在解决机器学习中特征工程从离线批处理向实时流处理迁移的难题。项目结合Bytewax(流处理框架)和Hopsworks(特征存储),提供了一套完整的实时特征管道实现方案。核心能力包括:实时数据接入与处理、特征计算与存储、以及特征服务的部署。通过示例代码和文档,开发者可以快速理解如何将实时数据流转化为可用于模型训练和推理的特征,从而支持在线预测场景。项目适合需要低延迟特征更新的推荐、风控等应用。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 137

核心亮点

  • 结合Bytewax和Hopsworks,提供从流处理到特征存储的完整闭环,技术选型前沿。
  • 代码结构清晰,示例完整,便于二次开发和集成到现有ML管道。
  • 针对实时特征场景,解决了离线特征延迟高的问题,提升模型时效性。

不足之处

  • 项目处于早期阶段,文档和社区支持相对有限。
  • 依赖特定商业组件(Hopsworks),可能影响完全开源部署。

适用场景

  • 实时推荐系统需要分钟级特征更新
  • 风控模型需要实时交易特征
  • IoT设备数据实时特征提取与监控

替代项目

Feast、Tecton、Kafka + Flink + Redis

上一篇:whitebox

下一篇:kubeflow-chart

同类项目推荐

Awesome-LLMOps 开源

一站式找齐 LLMOps 工具,告别选型大海捞针

An awesome & curated list of best LLMOps tools.

★ 270 2026-08-09
bella-openapi 开源

一个网关搞定多种AI能力,还带计费和限流

Bella OpenAPI是一个提供了丰富的AI调用能力的API网关,可类比openrouter,与之不同的是除···

★ 240 2026-08-09
hummingbird 开源

消费级硬件上跑超大 MoE 模型,统一内存调度

hummingbird is a lightweight, zero dependency runtime for massive open source Mixtur···

★ 63 2026-08-09
otari 开源

自建一个端点,管好所有大模型密钥和预算

Open-source AI gateway you run yourself. One endpoint for 40+ providers, with virtua···

★ 862 2026-08-09
vLLM-Hook 开源

给 vLLM 装上状态探针,编程控制模型内部,实现监控与干预。

Repo for vLLM Hook, an vLLM plug-in for programming internal states of models deploy···

★ 171 2026-08-12
LLM-Tools 开源

输入模型参数,秒算 GPU 显存和硬件需求

Open-source calculator for LLM system requirements.

★ 183 2026-08-09
omlx 开源

Mac 菜单栏一键跑大模型,SSD 缓存突破内存限制,连续批处理提速

LLM inference server with continuous batching & SSD caching for Apple Silicon — man···

★ 23441 2026-08-09
agent-sandbox 开源

在 K8s 上给每个 AI Agent 开一间独立有状态的沙箱

agent-sandbox enables easy management of isolated, stateful, singleton workloads, id···

★ 4543 2026-10-12
llm-graph-builder 开源

上传文档,一键用LLM自动生成知识图谱

Neo4j graph construction from unstructured data using LLMs

★ 5301 2026-08-09