🍃作者介绍：25届双非本科网络工程专业，阿里云专家博主，深耕 AI 原理 / 应用开发 / 产品设计。前几年深耕Java技术体系，现专注把 AI 能力落地到实际产品与业务场景。
🦅个人主页：@逐梦苍穹
🐼GitHub主页：https://github.com/XZL-CODE
✈ 您的一键三连，是我创作的最大动力🌹

1、前言

2026年3月23日深夜，Anthropic 放出了一个重磅炸弹——Claude Computer Use 正式以研究预览版的形式上线，集成到 Claude Cowork 和 Claude Code 中。

这意味着什么？

从今天开始，Claude 可以像一个真人员工一样，直接操控你的 macOS 电脑——打开应用、导航浏览器、填写表格、处理文件，甚至在你人不在电脑前的时候，通过手机远程指挥它干活。

配合此前一周密集发布的 Dispatch（手机调度）、Claude in Chrome（浏览器代理）、/schedule（定时任务）等功能，Anthropic 一口气搭建了一个完整的「AI 自动化员工」体系。

这篇文章，我会从快速上手到技术原理，再到竞品对比和安全风险，帮你彻底搞清楚这个功能到底是什么、怎么用、值不值得用。

2、一句话总结：它到底能干什么？

先别急着看原理，用一句话描述 Claude Computer Use 的核心能力：

你给 Claude 一个任务描述，它就能通过截屏、识别UI、点击鼠标、输入键盘的方式，像真人一样操作你 Mac 上的任何应用程序。

几个典型场景：

• 你在赶路，手机上告诉 Claude：「帮我把路演 PPT 转成 PDF，塞进下午两点的会议邀请附件里」——它自己在你电脑上完成
• 你在火车上，让 Claude 帮你启动开发服务器、截个图、在约定时间发到你手机
• 桌面上压了一堆店铺照片要处理，一句话让 Claude 批量统一尺寸、加水印

不是概念，不是 demo，是今天就能用的产品功能。

3、快速上手指南

3.1 谁能用？

条件	要求
操作系统	macOS（Windows/Linux 暂不支持）
客户端	Claude Cowork 桌面端 或 Claude Code CLI
订阅计划	Pro（$20/月）或 Max（$100-200/月）优先
系统权限	需授予辅助功能（Accessibility）+ 屏幕录制权限

3.2 如何开启？

在 Claude Cowork 中：

1. 打开 Claude Cowork 桌面应用
2. 发起一个新任务，描述你想让 Claude 在电脑上完成什么
3. 当 Claude 判断需要操控屏幕时，会弹出权限请求弹窗
4. 点击「Turn on」并为需要的应用授权（如 Finder、Chrome 等）
5. Claude 开始在你的桌面上自主操作

下面是 Anthropic 官方博客中展示的权限请求界面——Claude 会明确列出它需要访问的应用和权限级别：

图片来源：https://claude.com/blog/dispatch-and-computer-use

在 Claude Code 中：

# Claude Code 会在需要时自动请求 computer use 权限
# 例如：让它帮你在 IDE 中做修改、跑测试、提交 PR
claude "帮我在 VS Code 中打开项目，运行测试套件，把失败的测试截图发给我"

3.3 用手机远程指挥（Dispatch）

这是 Claude Computer Use 最酷的使用方式——你的电脑不在身边，但 Claude 在。

1. 确保 Mac 上的 Claude Cowork 保持运行状态
2. 在手机端 Claude App 中打开 Dispatch 对话
3. 直接用自然语言发送指令
4. Claude 在你的 Mac 上执行任务，完成后通过手机回复你结果

下面是 Anthropic 官方博客展示的 Dispatch + Computer Use 协作界面，用户在手机上发送任务，Claude Code 在电脑端自主执行代码任务：

图片来源：https://claude.com/blog/dispatch-and-computer-use

4、功能深度解析

4.1 Computer Use 的工作原理

Claude 不是通过 macOS 的 Accessibility API 来理解屏幕的——它用的是一种纯视觉的 Agent 循环：

整个流程是一个不断循环的四步闭环：

1. 截取屏幕：获取当前桌面的截图
2. 像素级分析：用视觉模型识别 UI 元素，计算每个按钮、输入框、菜单的精确像素坐标（从屏幕边缘计算距离）
3. 执行操作：发出鼠标移动、点击、键盘输入等指令
4. 验证结果：再次截屏，确认操作是否成功；如果没完成，继续循环

这个设计的好处是通用性极强——任何能在屏幕上显示的东西，Claude 都能操作，不需要应用提供 API 或插件。

Anthropic 收购的 Vercept 团队（2026年2月25日完成收购）带来了关键技术突破。Vercept 此前开发了一个叫 Vy 的产品，专门做远程 Mac 上的 computer use agent。整合 Vercept 技术后，Claude 在 OSWorld 基准测试上的得分从 15% 以下飙升到 72.5%，逼近人类水平（70-75%）。

4.2 工具优先级层级

Claude 在执行任务时，并不是上来就截屏操作。它有一套严格的工具优先级：

这个设计非常聪明——API 连接器最快最准确（比如直接调 Gmail API 发邮件），浏览器代理次之，屏幕控制是最后的兜底方案。这样既保证了效率，又最大限度降低了出错概率。

Anthropic 官方博客原文说得很直白：当 Claude 没有可用的工具连接器时，它会「point, click, and navigate what’s on your screen」——直接在屏幕上点点点。

4.3 Dispatch：手机遥控电脑

Dispatch 是和 Computer Use 配套发布的移动端功能，本质上是一个手机到电脑的任务调度通道。

它的价值在于：你人不在电脑前，但你的 Claude Cowork 桌面端还在运行。你在手机上描述任务，Claude 就在你的 Mac 上执行。执行完成后，结果通过手机端推送给你。

这个工作流真正实现了「你在路上，AI 在打工」的效果。

4.4 /schedule 和 /loop：定时任务自动化

除了手动触发，Claude 还支持定时自动执行任务，这才是真正让它变成「7×24 员工」的关键。

Claude Cowork 中的 /schedule：

在 Cowork 的任何任务中输入 /schedule，或者从侧边栏进入 Scheduled → New Task，就可以配置定时任务。支持的频率包括：每小时、每天、每周、仅工作日、手动触发。

Claude Code 中的 /loop：

# 每5分钟检查一次部署状态
/loop 5m check if the deployment finished and tell me what happened

# 每天早上9点自动检查PR并更新文档
/schedule 创建一个每日任务，检查昨天的所有PR，根据代码变更自动更新文档，然后通过Slack通知团队

Claude Code 的 PM Noah Zweben 透露，Anthropic 内部已经在大规模使用 /schedule——自动修 CI 报错、自动推文档更新，甚至有一个定时任务全权维护着一个 Python 库的 Go 语言孪生版本。

需要注意的限制：Cowork 的定时任务需要桌面端保持运行状态；Claude Code 的 /loop 任务是会话级别的，关闭终端就停止，且 3 天后自动过期。

5、安全架构与权限体系

作为 AI 应用工程师，安全问题是我最关注的部分。Anthropic 在 Computer Use 上搭建了一套多层防护体系：

用户侧控制：

• 每个新应用需要用户单独授权，Claude 不会偷偷访问未授权的 App
• 用户可以随时中断 Claude 的操作
• 支持自定义 App 黑名单
• 投资/加密货币类应用默认被屏蔽

系统级防护：

• 激活扫描（Activation Scanning）：实时扫描模型内部激活状态，检测 Prompt Injection 攻击
• 内容分类器：扫描截图中的不可信内容，发现可疑指令时要求用户确认
• 行为训练：Claude 被训练为拒绝执行股票交易、资金转账、敏感数据录入等高风险操作

但 Anthropic 也很坦诚地承认了已知风险：

• Prompt Injection 攻击成功率约 11%（缓解措施前是 23.6%）
• Computer Use 运行在 Cowork 的 VM 沙箱外部，直接操作真实桌面
• 操作可能产生级联效应（比如点击邮件中的链接会打开浏览器，不需要额外的浏览器授权）
• 近几个月已修补了两个 CVE 漏洞（CVE-2025-59536 远程代码执行、CVE-2026-21852 API Key 泄露）

官方建议：从可信应用开始使用，避免在 Computer Use 模式下操作敏感数据。

6、竞品对比：2026 Agent 大战全景

Claude Computer Use 并不是在真空中诞生的。2026年3月的 AI Agent 赛道，已经挤满了选手：

核心结论：

• 桌面自动化领域，Claude 以 OSWorld 72.5% 的成绩遥遥领先（人类水平约 70-75%）
• 网页自动化领域，OpenAI Operator 以 WebVoyager 87% 的成绩胜出
• 开源赛道，OpenClaw 凭借免费和跨平台优势积累了 33 万+ GitHub Stars
• 性价比方面，Perplexity Computer 以 $20/月 + 19 模型协调的方案冲击市场

一个讽刺的事实：OpenClaw 最初叫 Clawdbot，是基于 Claude 开发的。作者 Peter Steinberger 加入 OpenAI 后，项目更名。现在 Anthropic 发布 Dispatch + Computer Use，被外界解读为「对自己平台上诞生的项目的竞争回应」。

9to5Mac 的评论很精辟：Anthropic 现在做的，本质上就是 OpenClaw 在做的事情。AI Agent 运动始于 Claude，然后被 OpenAI 买走了。

7、未来展望：Phone Use 与 Orbit

在 Computer Use 发布的同一天，TestingCatalog News 爆料了一个更劲爆的消息：Anthropic 正在开发「Phone Use」功能，内部代号「Orbit 🪐」。

这个发现来自开发者 @M1Astra，他在 Claude 移动端的应用构建中发现了相关代码痕迹。如果属实，这意味着 Claude 将不仅能控制你的电脑，还能直接操控你的手机——点击、滑动、在 App 之间切换，甚至拨打电话。

Anthropic 目前没有官方确认或否认这个功能。但 TestingCatalog 此前在 2026 年 2 月曾发现 Claude iOS 端的「Tasks」功能痕迹，后来被证实是准确的。

如果 Phone Use 成真，那么从桌面到手机，你的所有屏幕，都将成为 Claude 的工位。

8、总结与思考

Claude Computer Use 的发布，标志着 AI Agent 赛道正式从「演示阶段」进入「产品阶段」。几个关键判断：

技术层面，OSWorld 72.5% 的得分证明了纯视觉方案的可行性。Anthropic 押注「视觉模型进步会自然带来更好的电脑操控能力」，这个路线目前看来是对的。

产品层面，Dispatch + Computer Use + /schedule 三件套组成了一个完整的自动化工作流——手机触发、桌面执行、定时循环。这种体验确实是之前任何单一工具都给不了的。

安全层面，11% 的注入攻击成功率和 VM 外运行的架构设计，意味着这个功能远未到可以无脑信任的阶段。在涉及敏感数据、金融操作、权限管理的场景中，务必保持人工监督。

竞争层面，macOS 限定、Usage 额度消耗快、Pro 计划仅能用 Haiku 模型做浏览器代理，这些都是当前的硬伤。但 Anthropic 的迭代速度（过去一周发了 9 项新功能）确实惊人。

对我们 AI 工程师来说，最值得关注的是：「AI 能否操控电脑」这个问题已经过时了。下一个问题是——哪种操控方式（云浏览器 vs 本地桌面 vs 开源方案 vs 手机端）会成为主流交互范式？

这个答案，可能在接下来的几个月就会揭晓。

---

参考资料：

• Anthropic 官方博客：https://claude.com/blog/dispatch-and-computer-use
• Claude Help Center - Computer Use in Cowork：https://support.claude.com/en/articles/14128542
• Claude Code Scheduled Tasks 文档：https://code.claude.com/docs/en/scheduled-tasks
• 9to5Mac 报道：https://9to5mac.com/2026/03/23/anthropic-is-giving-claude-the-ability-to-use-your-mac-for-you/
• SiliconANGLE 报道：https://siliconangle.com/2026/03/23/anthropics-claude-gets-computer-use-capabilities-preview/
• Engadget 报道：https://www.engadget.com/ai/claude-code-and-cowork-can-now-use-your-computer-210000126.html

🚀 持续探索 AI 与前沿技术 分享大模型应用、软件开发实战与行业洞察。 欢迎关注公众号 【龙哥AI】，加入 7000+ 技术同行的交流圈！ 🌟 探索技术边界，让开发更有效率