LLM-Tools

输入模型参数,秒算 GPU 显存和硬件需求

LLM-Tools 是一个开源的计算器工具,专门用于估算大型语言模型(LLM)系统的硬件需求。它解决了在部署 LLM 时,用户难以准确计算所需的 GPU 显存、内存、存储和算力等问题。该工具基于模型参数、精度、批量大小、序列长度等关键参数,提供量化的资源估算结果,帮助用户规划本地部署或云服务器配置。核心能力包括:支持多种主流模型架构的配置输入、自动计算推理和训练时的显存占用、提供不同硬件方案的对比建议。作为早期项目,它界面简洁,操作直观,适合技术团队在项目初期快速评估资源成本。

开源 free 开源模型
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 183
维护状态 低维护
是否开源 是
定价模式 free

项目数据

分类开源模型
开发团队manuelescobar-dev
所属国家
官网地址
定价模式free
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态
是否开源是
开源协议MIT
主要语言Python
技术栈/模型artificial-intelligence,deep-learning,large-language-models,llm,machine-learning,memory-management,open-source,streamlit,system-requirements
GitHub 星标★ 183
30天Star增速
HF 下载量
上线时间2024-04-24 00:00:00
最近更新2026-09-14 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数6

使用教程

核心亮点

  • 精准估算 LLM 推理/训练显存,避免资源浪费
  • 支持自定义模型参数,灵活适配多种架构
  • 纯 Python 实现,易于集成到现有运维脚本

不足之处

  • 文档/社区待观察
  • 仅支持估算,不提供实际部署优化建议

适用场景

  • 本地部署 LLM 前评估 GPU 选型
  • 云服务器资源规划与成本预算
  • 教学演示中展示模型规模与硬件关系

替代项目

llm-calculator、GPU-poor、Hugging Face Model Memory Calculator

项目介绍

LLM-Tools 是基础设施领域的开源项目,由 manuelescobar-dev 开发,2024 年首次发布。

它收录于基础设施分类,该分类目前共有 1,130 个项目,GitHub 星标数为 183。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-14。MIT许可证,完全免费,可自行部署使用。

它主要面向的使用场景是:本地部署LLM前评估GPU选型。同类可对比的替代方案包括 llm-calculator、GPU-poor、Hugging Face Model Memory Calculator。

上一篇:awesome-llmops

下一篇:qwen.cpp

同类项目推荐

freebuff-proxy 开源

聚合多账号,一键接入 OpenAI 兼容 API,轻松管理会话。

Multi-account OpenAI-compatible gateway for coding models. Pooled keys, session life···

★ 213 2026-08-20
microduck 开源

用 Rust 造一只会走路的桌面小鸭,快速上手双足机器人。

A Tiny biped duck robot

★ 8684 2026-09-10
soperator 开源

用 Kubernetes 原生方式运行 Slurm,简化 HPC 集群管理。

Run Slurm in Kubernetes

★ 439 2026-08-10
ollama 开源

一条命令本地跑起大模型,免费、私密、不卡顿

Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other···

★ 181484 2026-08-09