GitHub Copilot 开放 Computer Use 公测，能直接操控桌面应用

GitHub 在 10 月 1 日将 Computer Use 功能推入公开预览，GitHub Copilot 首次具备直接操作桌面应用的能力。该功能同时登陆 Windows 与 macOS 平台的 Copilot 命令行工具与桌面客户端，默认关闭，需用户主动开启。

启用后，Copilot 能借助操作系统的无障碍树与屏幕截图读取应用内容，进而点击控件、录入和编辑文字、按键、滚动、拖拽，并在不同应用之间流转，完成原本需要人工反复点击与切换窗口的多步任务。GitHub 举例称，用户可以让它走完一整套报销流程，或在缺乏接口的旧版软件里录入与搬运信息。

这套能力针对的是那些既不提供 API、也没有命令行或 MCP 接口的图形界面软件。GitHub 强调，当应用本身具备 API、MCP 服务或终端命令时，这些更可控的直接工具仍是首选；Computer Use 只是填补它们之间的空白。在 macOS 上，功能需要用户授予“辅助功能”与“屏幕录制”两项系统权限，因为它要读取可见内容才能操作。

权限与审批是这次发布的核心。Copilot 在控制应用前会请求授权，用户可选择本次允许、记为长期允许或拒绝；企业管理员也能通过托管设置统一关闭该功能。随着 AI 智能体从“生成答案”走向“代替操作”，审批、权限与可关闭性，正成为用户衡量一款自动化助手是否可信的关键。