GC-VLN

不训练模型,用图约束让机器人听懂指令找路

GC-VLN 是一个面向视觉-语言导航(VLN)任务的训练-free 方法,由 CoRL 2025 论文提出。它解决的是智能体在未知环境中,仅依赖自然语言指令和视觉输入进行导航时,传统方法需要大量训练数据且泛化能力差的问题。其核心创新在于将自然语言指令解析为图约束(Graph Constraints),并利用这些约束在导航过程中动态构建环境拓扑图,通过图搜索和约束满足来引导智能体决策,无需任何模型训练或微调。该方法结合了大型语言模型(LLM)的语义理解能力和经典的图搜索算法,实现了零样本的导航能力。核心能力包括:指令到图约束的自动转换、基于图约束的路径规划、以及对未知环境的自适应探索。项目提供了完整的代码实现和实验配置,支持在 R2R 等标准 VLN 数据集上进行评估。

开源 free 开源模型
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 84
维护状态 低维护
是否开源 是
定价模式 free

项目数据

分类开源模型
开发团队bagh2178
所属国家
定价模式free
价格说明开源项目,MIT许可证,完全免费,可自行部署使用。
访问状态
是否开源是
开源协议MIT
主要语言Python
技术栈/模型corl-2025,embodied-ai,large-language-models,vln-ce
GitHub 星标★ 84
30天Star增速
HF 下载量
上线时间2025-08-27 00:00:00
最近更新2026-09-22 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数3

使用教程

核心亮点

  • 零训练成本:无需微调任何模型,直接利用现成 LLM 和视觉编码器,大幅降低使用门槛
  • 可解释性强:导航决策基于显式构建的图约束,每一步都有逻辑依据,便于调试和信任
  • 泛化能力好:不依赖特定训练数据分布,对新环境和新指令的适应能力优于传统监督学习方法

不足之处

  • 依赖 LLM 的指令解析质量,复杂或模糊指令可能导致图约束构建不准确
  • 图搜索效率受环境规模影响,在超大场景下可能实时性不足

适用场景

  • 室内机器人导航:让家用服务机器人根据自然语言指令找到目标物体或房间
  • 自动驾驶辅助:在园区或停车场等封闭场景中,根据口头指令规划行驶路径
  • 智能眼镜/AR 导航:为视障用户或游客提供基于语音指令的实时路径指引

替代项目

VLN-BERT、DUET、ETPNav

项目介绍

GC-VLN 是计算机视觉领域的开源项目,由 bagh2178 开发,2025 年首次发布。

它收录于计算机视觉分类,该分类目前共有 447 个项目,GitHub 星标数为 84。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-22。MIT许可证,完全免费,可自行部署使用。

它主要面向的使用场景是:室内机器人导航:让家用服务机器人根据自然语言指令找到目标物体或房间。同类可对比的替代方案包括 VLN-BERT、DUET、ETPNav。

上一篇:ImageIndexer

下一篇:SensorLLM

同类项目推荐

modlens 开源

给纯文本编码代理装上眼睛,粘贴图片即刻获得结构化视觉证据。

The first vision plugin for DeepSeek Harness, and the vision bridge for every text-o···

★ 4019 2026-08-19
opencv 开源

开箱即用的视觉算法库,搞定图像视频处理与识别

Open Source Computer Vision Library

★ 90930 2026-08-10
OpenCVTutorials 开源

中文 OpenCV 教程,从入门到实战,边看边跑代码

OpenCV-Python4.1 中文文档

★ 1430 2026-08-20
DEIMv2 开源

用DINOv3做实时检测,又快又准,直接落地。

[DEIMv2] Real Time Object Detection Meets DINOv3

★ 2046 2026-08-14