agent-desktop 新版:桌面操作命令全部变成 MCP 工具

Vercel Labs 的“电脑操作”工具:不靠截图和像素匹配,而是读取 macOS、Windows、Linux 桌面应用的无障碍树,给每个可操作元素一个引用,代理据此点击、输入,再读一次界面确认结果。11 月 5 日发布的 1.2.0 新增 agent-desktop mcp,通过 stdio 把每个命令作为 MCP 工具提供;另外支持从管道读入要输入的文本、macOS 上选中只能通过容器改变的列表行,并可直接用 Homebrew 默认仓库安装。

原题:vercel-labs/agent-desktop

Vercel Labs 的“电脑操作”工具:不靠截图和像素匹配,而是读取 macOS、Windows、Linux 桌面应用的无障碍树,给每个可操作元素一个引用,代理据此点击、输入,再读一次界面确认结果。11 月 5 日发布的 1.2.0 新增 agent-desktop mcp,通过 stdio 把每个命令作为 MCP 工具提供;另外支持从管道读入要输入的文本、macOS 上选中只能通过容器改变的列表行,并可直接用 Homebrew 默认仓库安装。

为什么重要 和前几期相比的新东西:不用再在提示词里教代理调命令行,支持 MCP 的客户端直接就能操作桌面应用。

星数 16868(+2173 / 24h)

理由

  • 24 小时新增 2173 星,总星 16868(只代表关注度)。

风险

  • 快照、剪贴板和截图可能含隐私内容,README 提醒不要放进公开日志
  • 需要授予系统无障碍权限

打开

Trendshift(GitHub Trending 快照)

浏览最新 AI 动态