llama_ros

在 ROS 2 里直接跑本地大模型,机器人秒变能听会看会聊

开源 free 开发框架
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 268
维护状态 活跃
是否开源 是
定价模式 free

项目预览

项目数据

分类开发框架
开发团队mgonzs13
所属国家
定价模式free
价格说明开源免费,基于 llama.cpp 的 ROS 2 封装
访问状态
是否开源是
开源协议MIT
主要语言C++
技术栈/模型audio,cpp,embeddings,ggml,gguf,gpt,langchain,llama,llamacpp,llava,llavacpp,llm,multimodal,rerank,reranking,ros2,vlm
GitHub 星标★ 268
30天Star增速
HF 下载量
上线时间2023-04-01 00:00:00
代码更新—
仓库体积—
本站数据更新—
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-10-16
浏览次数0

项目介绍

llama_ros 是一个把 llama.cpp 与 llava.cpp 封装进 ROS 2 的开源框架,让机器人开发者能直接在 ROS 2 节点里运行 GGUF 格式的大语言模型和多模态视觉语言模型。它解决的核心问题是:过去在机器人系统里集成 LLM 需要自己写推理服务、处理消息通信和模型加载,门槛高且难以复用。该项目提供标准化的 ROS 2 节点与接口,支持文本生成、嵌入、重排序、多模态理解,还集成了音频与 LangChain 相关能力,方便构建语音对话、视觉问答、语义检索等机器人应用。底层基于 GGUF 量化模型,可在本地 CPU/GPU 上离线推理,兼顾隐私与实时性。整体定位是机器人智能化的中间层,把大模型能力变成 ROS 2 生态里可订阅、可组合的组件。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

正在加载星标数据…

技术标签

使用教程

—

核心亮点

  • 把 llama.cpp/llava.cpp 封装成标准 ROS 2 节点,话题与服务接口开箱即用
  • 支持 GGUF 量化模型,可本地离线推理,适合机器人端侧部署
  • 同时覆盖 LLM、VLM、embedding、rerank 与音频,多模态能力较完整

不足之处

  • 项目星标仅 268,社区规模小,长期维护与文档完善度待观察
  • 依赖 llama.cpp/llava.cpp 上游演进,接口与模型兼容性可能频繁变动

适用场景

  • 服务机器人语音对话:订阅语音识别结果,用 LLM 生成回复再转 TTS
  • 移动机器人视觉问答:结合摄像头图像与 VLM 回答环境相关问题
  • 机器人知识库检索:用 embedding 与 rerank 节点做语义搜索和重排序

替代项目

ros2_llm、autoware

上一篇:1c-ai-connector

下一篇:CodeGraphContext

同类项目推荐

dsh-our-free-model 开源

装个插件就能免密钥白嫖前沿大模型,不限量

在 dsh 里装上这个插件即可,无需登录、注册或填 API Key,就能使用包括 DeepSeek V4.1 Fl···

★ 17750 2026-10-04
ComfyUI-sol-attn 开源

在 ComfyUI 中让视频生成注意力更快更省显存

NVIDIA Sol-Attn for ComfyUI / Triton kernel on SM89 - SM121, with zero-copy MiniMax ···

★ 155 2026-08-09
langchain 开源

组装 AI 应用的乐高积木,从想法到上线不换工具

The agent engineering platform.

★ 147877 2026-08-09
transformers 开源

全球最大的模型仓库全家桶,想用的模型一把抓

Transformers: the model-definition framework for state-of-the-art machine learning m···

★ 167719 2026-08-09