awesome-production-machine-learning、model-serving-engines、MLOps-tools
awesome-ml-serving 是基础设施领域的开源项目，由 awesome-mlops 开发，2022 年首次发布。
它收录于基础设施分类，该分类目前共有 1,130 个项目，GitHub 星标数为 50。
项目已超过三个月没有代码更新，维护节奏明显放缓，最近一次代码更新于 2026-09-05。完全免费，无付费版本。
它主要面向的使用场景是：技术团队评估模型服务基础设施时作为参考。同类可对比的替代方案包括 awesome-production-machine-learning、model-serving-engines、MLOps-tools。
下一篇：domino-research
freebuff-proxy
开源
聚合多账号，一键接入 OpenAI 兼容 API，轻松管理会话。
Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···
microduck
开源
用 Rust 造一只会走路的桌面小鸭，快速上手双足机器人。
A Tiny biped duck robot
soperator
开源
用 Kubernetes 原生方式运行 Slurm，简化 HPC 集群管理。
Run Slurm in Kubernetes
ollama
开源
一条命令本地跑起大模型，免费、私密、不卡顿
Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···
