SG-Nav

给机器人装上'3D地图+大脑',零训练就能找东西

开源 🏷️完全免费 🔧 仅开源项目,无在线服务,需自行部署 开源模型 🍴 复刻 28 🐛 待处理 26 👀 关注 3
访问官网 ↗ GitHub ↗
GitHub 星标 ★ 358
维护状态 低维护
是否开源 开源
定价模式 🏷️完全免费 开源项目,MIT许可证,完全免费,可自行部署使用。

项目预览

SG-Nav 项目界面预览图
图片来源:GitHub 官方仓库名片

项目数据

分类开源模型
开发团队bagh2178
定价模式🏷️完全免费
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态🔧 仅开源项目,无在线服务,需自行部署
是否开源是
开源协议MIT
主要语言Jupyter Notebook
技术栈/模型3d-scene-graph,embodied-ai,large-language-models,matterport3d,neurips-2024,object-goal-navigation
GitHub 星标★ 358
上线时间2024-10-06 00:00:00
代码更新2025-09-16
仓库体积78.7 MB
本站数据更新2026-11-11
维护状态低维护
收录时间2026-08-09
浏览次数7

项目介绍

SG-Nav 是一个面向机器人导航的零样本目标定位框架,核心解决大型语言模型(LLM)在未知环境中无法直接理解3D场景结构的问题。它通过在线构建3D场景图(Scene Graph),将空间层级信息(如物体、区域、房间)转化为LLM可理解的提示(Prompt),从而引导机器人高效搜索目标物体,无需任何预训练或微调。系统包含场景图构建模块和基于LLM的决策模块,支持实时更新与重规划。该工作发表于NeurIPS 2024,提供了完整的代码、模型权重和仿真环境接口,适用于室内移动机器人、服务机器人和具身智能研究。

Star 增长趋势

本站每日记录该项目 GitHub 星标变化,观测越久曲线越完整

数据来源:GitHub API 逐日快照 · 收录于 2026-08-09 · 当前星标 ★ 358

核心亮点

  • 零样本无需微调,直接利用LLM常识推理,泛化到新物体和新环境
  • 在线构建3D场景图,比传统2D地图提供更丰富的空间语义信息
  • 提供完整仿真环境(Habitat)和真实机器人部署代码,复现门槛低

不足之处

  • 依赖LLM推理速度,实时性可能受限,在低算力设备上部署有挑战
  • 场景图构建质量受视觉感知模型影响,对遮挡和动态物体鲁棒性待验证

适用场景

  • 家庭服务机器人:让机器人根据自然语言指令找到'客厅的遥控器'
  • 仓储物流:在未知货架环境中定位指定商品
  • 具身智能研究:作为LLM+3D感知结合的基线方法

替代项目

CoW (Context-aware World Model)、ESC (Exploration with Semantic Context)、ZSON (Zero-Shot Object Navigation)

上一篇:UniGoal

下一篇:Awesome_Mamba

同类项目推荐

ViGeo 开源

让视频几何估计更连贯,重建更稳定

ViGeo: Towards Consistent Video Geometry Estimation

★ 142 2026-08-09
photonix 开源

自建私有云相册,用AI自动分类,秒搜你的照片

A modern, web-based photo management server. Run it on your home server and it will ···

★ 1955 2026-08-10
sports 开源

用AI看懂体育比赛,一键提取球员位置和动作数据

computer vision and sports

★ 5488 2026-08-10
platypus 开源

用 R 一份配置搞定 2D/3D 医学图像分割

Deep learning for medical images in R: semantic and instance segmentation, object de···

★ 136 2026-10-01
OnnxTR 开源

用 ONNX 跑 docTR OCR,不装 PyTorch 也能识别文档文字

OnnxTR a docTR (Document Text Recognition) library Onnx pipeline wrapper - for seaml···

★ 201 2026-09-19
Atlantis 开源

用扩散模型给水下图像补深度,无需真实标注也能测距

Atlantis: Enabling Underwater Depth Estimation with Stable Diffusion (CVPR2024, High···

★ 129 2026-09-28
Doxa 开源

一键对比十多种图像二值化算法,选型调参不再愁

A Local Adaptive Thresholding framework for image binarization written in C++, with ···

★ 195 2026-08-10