llamafarm

几分钟部署任意 AI 模型到本地或云端

llamafarm 是一个面向 AI 应用的一站式部署工具,旨在让用户能够在几分钟内将任意 AI 模型、智能体、数据库、RAG 流水线等部署到本地或远程环境。它通过简化配置和自动化流程,解决了 AI 项目从开发到生产环境部署的复杂性问题。核心能力包括:支持多种主流模型(如 Llama、Mistral、Gemma、Grok 等)的快速部署,提供边缘计算支持,内置模型微调(finetuning)工具,以及与 OpenAI 等 API 的兼容接口。用户可以通过命令行或配置文件定义部署拓扑,实现一键启动。项目处于早期阶段,但已具备基本的 MLOps 功能,适合个人开发者和小团队快速验证 AI 应用。

开源 unknown 对话助手
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 838
维护状态 低维护
是否开源 是
定价模式 unknown

项目数据

分类对话助手
开发团队llama-farm
所属国家
定价模式unknown
价格说明官网存在但定价信息不明确,需进一步确认
访问状态
是否开源是
开源协议Apache-2.0
主要语言Python
技术栈/模型ai,aiproject,chatgpt,claude,edge,edge-computing,finetuning-llms,gemma,grok,llama3,llama4,mistral,mlops,models,openai,prompt-engineering,qwen,rag,sora
GitHub 星标★ 838
30天Star增速
HF 下载量
上线时间2025-07-09 00:00:00
最近更新2026-09-21 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数7

使用教程

核心亮点

  • 支持模型、智能体、数据库、RAG 等多种组件的一体化部署,覆盖 AI 应用全链路
  • 兼容 OpenAI API,可无缝替换现有 AI 服务,降低迁移成本
  • 内置边缘计算和微调支持,适合在资源受限环境快速实验

不足之处

  • 项目早期,文档和社区生态尚不完善,遇到问题可参考资源较少
  • 功能覆盖广但深度有限,复杂生产环境下的稳定性待验证

适用场景

  • 个人开发者快速搭建本地 AI 原型环境
  • 边缘设备上部署轻量级模型推理服务
  • 小团队内部搭建统一的模型部署平台

替代项目

Ollama、vLLM、Dify

项目介绍

llamafarm 是基础设施领域的开源项目,由 llama-farm 开发,2025 年首次发布。

在全站 13,090 个收录项目中,它的 GitHub 星标数(838)位列前 30%,在基础设施分类中处于中上游。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-21。官网存在但定价信息不明确,需进一步确认。从国内网络环境看,可直接访问。

它主要面向的使用场景是:个人开发者快速搭建本地AI原型环境。同类可对比的替代方案包括 Ollama、vLLM、Dify。

上一篇:myriade

下一篇:ai00_server

同类项目推荐

freebuff-proxy 开源

聚合多账号,一键接入 OpenAI 兼容 API,轻松管理会话。

Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···

★ 213 2026-08-20
microduck 开源

用 Rust 造一只会走路的桌面小鸭,快速上手双足机器人。

A Tiny biped duck robot

★ 8684 2026-09-10
soperator 开源

用 Kubernetes 原生方式运行 Slurm,简化 HPC 集群管理。

Run Slurm in Kubernetes

★ 439 2026-08-10
ollama 开源

一条命令本地跑起大模型,免费、私密、不卡顿

Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···

★ 181484 2026-08-09