照着抄，把模型快速变成可调用的 HTTP 服务
Truss 是一个将机器学习模型打包并部署为 HTTP 服务的开源框架，而 truss-examples 是其官方示例仓库，汇集了多种主流模型的部署范例。它解决了 AI 开发者从训练到上线之间的工程化难题，无需手动编写服务代码、处理依赖或配置推理环境。仓库覆盖了从经典机器学习（如 XGBoost、Scikit-learn）到深度学习（如 PyTorch、TensorFlow）以及大语言模型（如 Llama、GPT）的部署示例，每个示例都包含完整的 Truss 配置、依赖文件和调用说明。核心能力在于提供可直接运行的模板，帮助用户快速理解 Truss 的打包流程、依赖管理、资源分配和 API 暴露方式，从而缩短模型上线的周期。
BentoML examples、Ray Serve examples、MLflow models
truss-examples 是基础设施领域的开源项目，由 basetenlabs 开发，2023 年首次发布。
它收录于基础设施分类，该分类目前共有 1,132 个项目，GitHub 星标数为 231。
项目目前处于活跃维护状态，最近一次代码更新于 2026-09-14。MIT许可证，完全免费，无付费版本。
它主要面向的使用场景是：快速将训练好的模型部署为内部API服务。同类可对比的替代方案包括 BentoML examples、Ray Serve examples、MLflow models。
freebuff-proxy
开源
聚合多账号，一键接入 OpenAI 兼容 API，轻松管理会话。
Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···
microduck
开源
用 Rust 造一只会走路的桌面小鸭，快速上手双足机器人。
A Tiny biped duck robot
soperator
开源
用 Kubernetes 原生方式运行 Slurm，简化 HPC 集群管理。
Run Slurm in Kubernetes
ollama
开源
一条命令本地跑起大模型，免费、私密、不卡顿
Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···
