llmaker

终端一键拉起整套自托管 LLM 服务栈

llmaker 是一个面向开发者的自托管 LLM 工具链管理工具，旨在让你通过终端一键部署和运行完整的现代大语言模型技术栈。它解决了自托管 LLM 过程中环境配置复杂、组件繁多、难以统一管理的问题。核心能力包括：从终端初始化并管理多个 LLM 相关服务（如模型推理、向量数据库、网关等），提供统一的命令行接口，简化部署流程，并支持自定义配置。项目采用 Go 语言开发，强调轻量、快速和可移植性，适合希望完全掌控自己 LLM 基础设施的开发者。

开源 free 基础设施
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 104
维护状态 维护中
是否开源 是
定价模式 free

项目数据

分类基础设施
开发团队raiyanyahya
所属国家
官网地址https://llmaker.raiyanyahya.workers.dev
GitHubhttps://github.com/raiyanyahya/llmaker
定价模式free
价格说明开源项目，可自行部署，无付费版本。
访问状态
是否开源是
开源协议NOASSERTION
主要语言Go
技术栈/模型ai-agents,bubbletea,cli,docker,fastapi,golang,langchain,langgraph,llama-cpp,llm,llmops,local-ai,local-llm,ollama,openai-api,qdrant,rag,self-hosted,vector-database
GitHub 星标★ 104
30天Star增速
HF 下载量
上线时间2026-06-24 00:00:00
最近更新2026-09-10 00:00:00
维护状态维护中
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数5

使用教程

核心亮点

  • 统一命令行管理多个 LLM 组件，降低部署门槛
  • Go 单二进制分发，部署简单快速
  • 面向自托管场景，数据隐私可控

不足之处

  • 早期项目，功能覆盖和稳定性待验证
  • 文档/社区待观察

适用场景

  • 个人开发者快速搭建本地 LLM 实验环境
  • 小团队在自有服务器上部署私有 LLM 服务
  • 需要离线或内网环境运行 LLM 的场景

替代项目

Docker Compose + Ollama、LocalAI、Hugging Face TGI

项目介绍

llmaker 是基础设施领域的开源项目，由 raiyanyahya 开发，是 2026 年新上线的项目。

它收录于基础设施分类，该分类目前共有 1,132 个项目，GitHub 星标数为 104。

项目仍在小幅维护中，最近一次代码更新于 2026-09-10。可自行部署，无付费版本。

它主要面向的使用场景是：个人开发者快速搭建本地LLM实验环境。同类可对比的替代方案包括 Docker Compose + Ollama、LocalAI、Hugging Face TGI。

上一篇：portkey-python-sdk

下一篇：hub

同类项目推荐

freebuff-proxy 开源

聚合多账号，一键接入 OpenAI 兼容 API，轻松管理会话。

Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···

★ 213 2026-08-20
microduck 开源

用 Rust 造一只会走路的桌面小鸭，快速上手双足机器人。

A Tiny biped duck robot

★ 8684 2026-09-10
soperator 开源

用 Kubernetes 原生方式运行 Slurm，简化 HPC 集群管理。

Run Slurm in Kubernetes

★ 439 2026-08-10
ollama 开源

一条命令本地跑起大模型，免费、私密、不卡顿

Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···

★ 181484 2026-08-09