computer-use-linux

让 AI 智能体直接操控 Linux 桌面,跨应用自动干活

computer-use-linux 是一个用 Rust 编写的 Linux 桌面自动化控制服务,通过 MCP(Model Context Protocol)把 Linux 桌面能力暴露给 Claude、Codex 等 AI 智能体。它解决的核心问题是:现有 computer-use 方案多集中在 macOS 和 Windows,Linux 桌面缺乏统一、可被 LLM 调用的控制层。项目整合了 AT-SPI 无障碍接口读取界面元素、GNOME Shell 扩展获取窗口状态、Wayland portals 处理截图与输入授权,并用 ydotool 在 Wayland 下模拟键鼠操作,从而绕开 X11 时代工具在 Wayland 上的兼容性问题。核心能力包括:查询当前窗口与可访问性树、点击/输入/滚动、截屏、执行 shell 命令等,让 AI 代理能像人一样操作 Linux 桌面完成跨应用任务。

开源 free 自动化工作流
访问官网 ↗ GitHub ↗ 文档 ↗
GitHub 星标 ★ 560
维护状态 活跃
是否开源
定价模式 free

项目数据

分类自动化工作流
开发团队agent-sh
所属国家
官网地址
定价模式free
价格说明开源免费,无在线服务,需自行部署
访问状态
是否开源
开源协议MIT
主要语言Rust
技术栈/模型agent,ai,cargo,claude,codex,computer-use,gnome,hermes,linux,llm,mcp,npm,oss,rust,shell,skill,tools,wayland,ydotool
GitHub 星标★ 560
30天Star增速
HF 下载量
上线时间2026-05-13 00:00:00
最近更新2026-09-18 00:00:00
维护状态活跃
中文支持
访问方式
移动端支持
综合评分
收录时间2026-09-16
浏览次数0

使用教程

核心亮点

  • 原生支持 Wayland,用 ydotool + portals 绕开 X11 工具在 Wayland 下的失效问题
  • 基于 AT-SPI 无障碍树读取界面元素,比纯截图坐标点击更稳定、更语义化
  • 用 Rust 实现,通过 MCP 标准协议对接 Claude/Codex 等主流智能体,接入成本低

不足之处

  • 依赖 GNOME Shell 扩展与 AT-SPI,在 KDE、Sway 等非 GNOME 环境可能功能受限
  • 项目处于早期,543 星,文档与社区生态尚不成熟

适用场景

  • 让 AI 代理自动填写网页表单、下载并整理文件
  • 在 Linux 桌面上做跨应用的 UI 自动化测试
  • 用自然语言指令驱动桌面完成重复性办公操作

替代项目

pyautogui、xdotool、Open Interpreter

项目介绍

computer-use-linux 是自动化工作流领域的开源项目,由 agent-sh 开发,是 2026 年新上线的项目。

它收录于自动化工作流分类,该分类目前共有 487 个项目,GitHub 星标数为 560。

项目目前处于活跃维护状态,最近一次代码更新于 2026-09-18。开源免费,无在线服务,需自行部署。

它主要面向的使用场景是:让AI代理自动填写网页表单、下载并整理文件。同类可对比的替代方案包括 pyautogui、xdotool、Open Interpreter。

上一篇:reader

下一篇:video-recap-skills

同类项目推荐

n8n 开源

拖拽搭建自动化流程,轻松接入 AI 与 400+ 应用,搞定重复工作。

Fair-code workflow automation platform with native AI capabilities. Combine visual b···

★ 205363 2026-08-10
robotcode 开源

让 Robot Framework 拥有现代 IDE 体验,调试、补全、运行一气呵成。

Open Source Toolkit for Robot Framework, providing Language Server Protocol support,···

★ 299 2026-08-10
puppeteer 开源

用 JavaScript 轻松操控无头浏览器,搞定自动化测试与网页抓取。

JavaScript API for Chrome and Firefox

★ 95591 2026-08-10
customermates 开源

比 Pipedrive 直观 10 倍的现代开源 CRM,轻松管理客户与自动化流程。

Building a modern alternative to Pipedrive that is 10x more intuitive.

★ 227 2026-08-10