popmon

自动监控数据漂移,及时预警异常变化

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 基础设施 🍴 复刻 36 🐛 待处理 13 👀 关注 12
GitHub ↗
GitHub 星标 ★ 512
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

popmon 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类基础设施
开发团队ing-bank
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Python
技术栈/模型covariate-shift,data-analysis,data-distributions,data-profiling,data-science,dataset-shifts,drift-detection,hacktoberfest,ing-bank,ipython,jupyter,mlops,monitoring,pandas,population-monitoring,python,spark,statistical-process-control,statistical-tests,statistics
GitHub 星标★ 512
上线时间2020-04-23 00:00:00
代码更新2026-01-09
仓库体积7.5 MB
本站数据更新2026-11-07
维护状态低维护
收录时间2026-08-09
浏览次数7

项目介绍

popmon 是一个用于监控 Pandas 或 Spark 数据框稳定性的开源库。它通过自动计算数据分布、统计指标和相关性等特征,并基于历史数据或预期值进行对比,帮助用户发现数据漂移、异常变化和潜在质量问题。其核心能力包括:自动生成数据质量报告、支持时间序列分析、可扩展的检查器架构,以及将结果可视化。popmon 解决了数据管道中因数据分布变化导致的模型性能下降或业务决策失误问题,适用于数据监控、特征工程验证和模型上线后的持续监测场景。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 512

使用教程

难度:进阶 约 35 分钟 部署方式:本地安装 5 步

环境要求

  • Python 3.9+
  • 带时间维度的表格数据

安装与启动步骤

  1. 1装包

    一条命令装完。

    pip install popmon
  2. 2备一份带时间列的数据

    它的核心就是按时间切片比较分布。

  3. 3跑稳定性报告

    出一份各时间段的分布对比。

    popmon report data.csv
  4. 4看告警项

    重点关注漂移最大的几列。

  5. 5接进日常监控

    定期跑并把结果推到看板。

如何确认成功

对一份跨月数据生成稳定性报告,能定位出至少一列发生显著分布漂移并给出对应时间段

注意事项

  • 它检查数据集随时间的稳定性,本质是把分布漂移检测做成报告。
  • 适合监控上游数据源变化对模型输入的影响。
  • 时间粒度选太细全是噪声,太粗又会漏掉突变。
  • 报告只是提示,算不算问题要结合业务判断。

核心亮点

  • 自动计算并对比数据分布,快速发现漂移
  • 支持 Pandas 和 Spark,兼容主流数据框架
  • 提供可视化报告,便于快速理解数据状态

不足之处

  • 文档/社区待观察
  • 早期项目,功能迭代和生态尚不成熟

适用场景

  • 数据管道质量监控,实时检测数据异常
  • 机器学习模型上线后的特征分布漂移监测
  • 数据仓库定期数据质量审计

替代项目

Great Expectations、whylogs、Evidently

上一篇:kraken

下一篇:terraform-aws-metaflow

同类项目推荐

TorchStream 开源

让 PyTorch 模型像流式 API 一样边输入边输出,实时响应

A library for making PyTorch models streamable

★ 67 2026-08-09
eloquentjs 开源

在 Node.js 里用 Laravel 式语法操作数据库,开发效率翻倍

EloquentJS monorepo — Laravel Eloquent for Node.js

★ 75 2026-08-09
lilypad 开源

像管代码一样管模型,一键追踪、标注、迭代

Open-source versioning, tracing, and annotation tooling.

★ 214 2026-08-09
aisbom 开源

给 AI 模型和数据集做“成分表”,让供应链透明可审计

Static security scanner for ML model files — detects pickle bombs, Keras Lambda RCE···

★ 83 2026-08-09
OSCAR 开源

KV Cache 压到 2-bit,长上下文推理显存大降

OSCAR: Offline Spectral Covariance-Aware Rotation for 2-bit KV Cache Quantization

★ 562 2026-10-17
BrowserAI 开源

在浏览器里本地跑大模型,离线私密零成本

Run local LLMs like llama, deepseek-distill, kokoro and more inside your browser

★ 1451 2026-08-09
llmix 开源

不改代码,热切换模型,自动加缓存重试熔断,让 LLM 调用更稳更省。

Production LLM call layer for AI agents and tools: keep OpenAI/Anthropic/AI SDK/Lite···

★ 128 2026-08-09
latitude-llm 开源

追踪 Agent 失败点,派编码助手修好并用真实轨迹验证

Open-source observability for AI agents. Find where your agents fail, dispatch your ···

★ 4746 2026-09-16