基础设施

StringZilla 开源

一行代码，让字符串处理快上百倍，跨语言通用。

StringZilla 是一个跨语言的高性能字符串处理库，专为加速字符串搜索、哈希、排序、编辑距离计算、···

docker-containers 开源

拉取即用，快速搭建 fast.ai 深度学习环境

docker-containers 是 fast.ai 官方维护的 Docker 镜像仓库，旨在为深度学习和机器学习开发者提供开···

airbyte 开源

600+连接器，把任意数据源同步到仓库或AI应用

Airbyte 是一个开源数据集成平台，专注于 ELT 管道和 AI 应用的数据搬运。它解决的核心问题是：企业···

mlreef 开源

一站式 ML 协作平台，让团队高效管理代码、数据与实验。

mlreef 是一个面向机器学习团队的协作工作区，旨在解决 ML 项目中代码、数据和实验管理分散、协作效···

kraken 开源

自托管 CI 系统，灵活流水线，轻松掌控测试全流程。

Kraken CI 是一个用 Python 编写的持续集成与测试系统，旨在为开发团队提供自托管的 CI/CD 解决方案···

great_expectations_action 开源

在CI中一键验证数据质量，让数据管道更可靠

这是一个GitHub Action，旨在简化在CI工作流中使用Great Expectations验证数据管道的过程。它解决了···

qdrant 开源

上亿条数据秒级搜到最像的那条，AI 应用嗖嗖快

用 Rust 编写的高性能向量数据库与向量检索引擎，专为新一代 AI 应用设计，支持亿级向量的规模化管···

awesome-mlops 开源

一张清单，快速摸清 MLOps 工具全家桶，选型不抓瞎

这是一个精心整理的 MLOps 工具精选清单，旨在帮助机器学习工程师、数据科学家和平台团队快速发现和···

caiss 开源

跨平台多语言，秒级检索海量相似向量

caiss 是一个用 C++ 实现的跨平台、多语言支持的相似向量/相似词/相似句高性能检索引擎。它旨在解决···

MLOps.NET 开源

让 ML.NET 模型也能像软件一样版本化、可追踪、易部署

MLOps.NET 是一个面向 ML.NET 模型的操作与管理工具，旨在填补 ML.NET 生态中 MLOps 能力的空白。它···

popmon 开源

自动监控数据漂移，及时预警异常变化

popmon 是一个用于监控 Pandas 或 Spark 数据框稳定性的开源库。它通过自动计算数据分布、统计指标···

ML-Model-CI 开源

一键将训练好的模型自动优化并部署为高性能推理服务

MLModelCI 是一个面向机器学习服务的 MLOps 平台，旨在打通模型训练与线上部署之间的断层。它提供模···

beneath 开源

免运维的实时数据管道，一键接入，秒级查询。

Beneath 是一个基于 Go 语言构建的无服务器实时数据平台，旨在简化数据管道的搭建与运维。它解决了···

dbx 开源

用声明式配置和命令行，轻松管理 Databricks 工作流和部署。

dbx 是 Databricks 的 CLI 扩展工具，旨在简化 Databricks 上的开发与工作流管理。它解决了 Databr···

awesome-mlops 开源

一站式查遍 MLOps 工具，选型不再愁

awesome-mlops 是一个精心整理的 MLOps 资源列表，旨在为机器学习工程师、数据科学家和平台团队提供···

cicd-templates 开源

用代码一键管理 Databricks 部署，告别手动配置

cicd-templates 是一个面向 Databricks 平台的 CI/CD 模板集合，旨在帮助团队用代码管理 Databrick···

dud 开源

像管代码一样管数据，轻量级数据版本控制与管道工具

dud 是一个用 Go 编写的轻量级命令行工具，旨在将数据版本管理与源代码版本控制（如 Git）相结合，···

ploomber 开源

像写 Notebook 一样快速构建数据管道，一键部署上云。

Ploomber 是一个用于构建数据管道的 Python 框架，旨在加速从开发到部署的整个流程。它解决了数据工···

qaboard 开源

把实验记录整理成册，一键对比调参结果

qaboard 是一个实验追踪工具，旨在帮助算法和性能研发团队系统化管理实验过程。它解决了机器学习或···

client 开源

用 Python 客户端轻松管理 DagsHub 上的数据和模型

DagsHub client 是 DagsHub 平台提供的 Python 客户端库，用于与 DagsHub 的数据和模型管理功能进行···

clearml-agent 开源

一键排队运行ML任务，自动调度GPU，省心省力

ClearML Agent 是 ClearML 平台的核心调度与编排组件，负责执行远程任务、管理队列并调度 GPU 等计···

kfp-tekton 开源

用KFP写流水线，跑在Tekton上，无缝迁移

kfp-tekton 是一个将 Kubeflow Pipelines（KFP）与 Tekton 深度集成的开源项目，旨在让用户能够用 ···

sig-mlops 开源

看这一份MLOps标准指南，少走弯路

CDF（持续交付基金会）旗下的MLOps特别兴趣小组（SIG），旨在为机器学习运维领域定义标准、最佳实践···

azhpc-images 开源

一键构建 Azure 上优化好的 HPC/AI 虚拟机镜像，省去环境配置烦恼

azhpc-images 是微软 Azure 官方维护的 HPC/AI 虚拟机镜像构建脚本集合，基于 Shell 和 Packer 自动···