GitHub 将 computer use 带入 Copilot CLI 和 Copilot 应用的公开预览。它可以读取桌面应用内容、点击按钮、输入文字并在多个应用之间导航,因此某些没有 API、CLI 或 MCP 接口的桌面工作也能交给 Copilot 试做。命令行用户可用 /computer on 开启、/computer show 查看状态。
这项能力默认仍需要人确认后才控制应用,组织管理员可以在策略中禁用。macOS 用户还要给应用 Accessibility 和 Screen Recording 权限,权限没有被授予时,预览功能不能绕过系统限制。
GitHub 给出的示例包括汇总通知、更新演示文稿和处理桌面工作流。它目前属于 public preview,适合先在低风险、可回滚的流程里试用,不能因为 Agent 能操作鼠标就把它当成已经稳定的企业自动化平台。