Serving-Machine-Learning-Models 是基础设施领域的开源项目,由 Nneji123 开发,2022 年首次发布。
它收录于基础设施分类,该分类目前共有 1,130 个项目,GitHub 星标数为 53。
项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-07-01。MIT许可证,完全免费,需自行部署。
它主要面向的使用场景是:快速搭建模型API服务。同类可对比的替代方案包括 BentoML、MLflow Models、Ray Serve。

一套代码示例,搞定模型上线多种姿势
这是一个专注于机器学习模型服务与部署的教学型仓库,提供了使用 Docker、Flask、FastAPI、BentoML、Streamlit、MLflow 等多种框架和工具来部署模型的详细指南、模板代码和示例。项目旨在帮助开发者快速上手模型上线流程,覆盖从简单的 Web API 到完整的服务化部署,甚至包括将模型部署为 Android 应用的代码示例。内容以实践为导向,适合初学者和需要快速参考的工程师。虽然星标数不高,但内容系统,解决了模型训练后如何高效、标准化地对外提供服务的常见问题。
BentoML、MLflow Models、Ray Serve
Serving-Machine-Learning-Models 是基础设施领域的开源项目,由 Nneji123 开发,2022 年首次发布。
它收录于基础设施分类,该分类目前共有 1,130 个项目,GitHub 星标数为 53。
项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-07-01。MIT许可证,完全免费,需自行部署。
它主要面向的使用场景是:快速搭建模型API服务。同类可对比的替代方案包括 BentoML、MLflow Models、Ray Serve。
上一篇:cicd-templates
下一篇:cinnamon
freebuff-proxy
开源
聚合多账号,一键接入 OpenAI 兼容 API,轻松管理会话。
Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···
microduck
开源
用 Rust 造一只会走路的桌面小鸭,快速上手双足机器人。
A Tiny biped duck robot
soperator
开源
用 Kubernetes 原生方式运行 Slurm,简化 HPC 集群管理。
Run Slurm in Kubernetes
ollama
开源
一条命令本地跑起大模型,免费、私密、不卡顿
Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···