language-conditioned-robot-manipulation-models

用自然语言指挥机器人干活,跨本体通用操作模型

这是一个基于语言条件控制的机器人操作模型集合,对应论文《Open X-Embodiment: Robotic Learning Datasets and RT-X Models》。项目旨在解决机器人操作中跨本体、跨任务泛化能力不足的问题,通过大规模多机器人数据训练,让模型能够理解自然语言指令并直接输出机器人动作。核心能力包括:支持多种机器人本体(如单臂、双臂、移动操作平台),提供预训练模型权重和推理代码,以及配套的数据集处理工具。项目强调从真实机器人数据中学习,而非仿真环境,因此更贴近实际部署需求。目前处于早期阶段,代码结构清晰,但依赖特定的机器人硬件和ROS环境。

开源 free 开源模型
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 85
维护状态 低维护
是否开源
定价模式 free

项目数据

分类开源模型
开发团队hk-zh
所属国家
官网地址
定价模式free
价格说明开源模型,MIT许可证,完全免费,可自行部署使用。
访问状态
是否开源
开源协议MIT
主要语言
技术栈/模型foundation-models,imitation-learning,language-conditioned-learning,large-languge-models,neural-symbolic,reinforcement-learning,robot-manipulation,visual-language-models
GitHub 星标★ 85
30天Star增速
HF 下载量
上线时间2024-01-03 00:00:00
最近更新2026-09-04 00:00:00
维护状态低维护
中文支持
访问方式
移动端支持
综合评分
收录时间2026-08-09
浏览次数4

使用教程

核心亮点

  • 基于Google RT-X论文,数据规模大,覆盖22种机器人本体,泛化潜力强
  • 提供预训练权重,可直接在兼容硬件上测试,降低入门门槛
  • 代码模块化设计,支持自定义数据集微调,便于二次开发

不足之处

  • 依赖特定ROS环境和硬件接口,非标准环境难以直接运行
  • 文档仅指向论文,缺乏快速上手指南,新手配置成本高
  • 模型推理需要较高GPU显存,普通设备难以流畅运行

适用场景

  • 科研机构复现RT-X模型,验证跨本体操作能力
  • 机器人公司评估语言指令控制方案,用于产品原型
  • 高校教学演示多模态模型在机器人领域的应用

替代项目

RT-X (Google Robotics)、RoboCat (DeepMind)、VIMA (Stanford)

项目介绍

language-conditioned-robot-manipulation-models 是行业应用领域的开源项目,由 hk-zh 开发,2024 年首次发布。

它收录于行业应用分类,该分类目前共有 544 个项目,GitHub 星标数为 85。

项目已超过三个月没有代码更新,维护节奏明显放缓,最近一次代码更新于 2026-09-04。MIT许可证,完全免费,可自行部署使用。

它主要面向的使用场景是:科研机构复现RT-X模型,验证跨本体操作能力。同类可对比的替代方案包括 RT-X (Google Robotics)、RoboCat (DeepMind)、VIMA (Stanford)。

同类项目推荐

xmgai-like 开源

换脸、艺术二维码随手玩,副业灵感一包带走。

本开源 AI 副业搞钱项目集成了强大功能,包括 AI 艺术二维码生成、AI 换脸、Delle3 绘画等···

★ 60 2026-08-09
spoken-to-signed-translation 开源

把口语文本一路转成手语视频的流水线

a text-to-gloss-to-pose-to-video pipeline for spoken to signed language translation

★ 102 2026-09-11
LiveTranslate 开源

直播看片实时翻译,字幕秒出,跨语言无压力

Real-time audio translation, captures system audio + mic, runs ASR (Whisper/SenseVoi···

★ 691 2026-08-13