merlin 是基础设施领域的开源项目,由 caraml-dev 开发,2020 年首次发布。
它收录于基础设施分类,该分类目前共有 1,132 个项目,GitHub 星标数为 183。
项目仍在小幅维护中,最近一次代码更新于 2026-07-19。Apache-2.0许可证,可免费使用和部署。
它主要面向的使用场景是:团队已有Kubernetes集群,需要标准化模型部署流程。同类可对比的替代方案包括 Kubeflow、Seldon Core、BentoML。

在 Kubernetes 上轻松管理、部署和上线 ML 模型,省心省力。
Merlin 是一个面向 Kubernetes 的机器学习模型管理、部署和服务平台,旨在简化 ML 模型从训练到生产的全流程。它解决了在 Kubernetes 环境中模型版本管理、部署、扩展和监控的复杂性,提供统一的模型仓库、自动化的部署流水线、弹性伸缩的服务端点以及可观测性集成。核心能力包括模型版本控制、多模型服务、A/B 测试、金丝雀发布、自动扩缩容以及与常用 ML 工具链的集成。通过声明式配置和 Kubernetes 原生 API,用户能快速将模型上线为高可用的在线服务,并支持批处理预测。项目使用 Go 开发,适合已有 Kubernetes 基础设施的团队。
Kubeflow、Seldon Core、BentoML
merlin 是基础设施领域的开源项目,由 caraml-dev 开发,2020 年首次发布。
它收录于基础设施分类,该分类目前共有 1,132 个项目,GitHub 星标数为 183。
项目仍在小幅维护中,最近一次代码更新于 2026-07-19。Apache-2.0许可证,可免费使用和部署。
它主要面向的使用场景是:团队已有Kubernetes集群,需要标准化模型部署流程。同类可对比的替代方案包括 Kubeflow、Seldon Core、BentoML。
freebuff-proxy
开源
聚合多账号,一键接入 OpenAI 兼容 API,轻松管理会话。
Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···
microduck
开源
用 Rust 造一只会走路的桌面小鸭,快速上手双足机器人。
A Tiny biped duck robot
soperator
开源
用 Kubernetes 原生方式运行 Slurm,简化 HPC 集群管理。
Run Slurm in Kubernetes
ollama
开源
一条命令本地跑起大模型,免费、私密、不卡顿
Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···