Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

全文速览图

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

前天,Claude 凌晨的时候,新发了一个更新。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

可以让 Claude,通过 Computer use,纯视觉的方案,来对你的电脑进行操控。

这个意义极度重大,不亚于当时豆包手机出来的时候,对一众没有开放自己权限的三方 APP 的冲击。

最简单同时也是最牛逼的用法,就是,你可以用 Claude,来直接操控你的电脑微信了。

比如,我一句话,就可以把我桌面上的文件,再随便配上一句话,发给我的微信联系人。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

整个过程,Claude 真的非常有条理地挨个发消息。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

Claude 摇身一变,成为了真正的小龙虾

其实很多人不知道,小龙虾刚出来时候的名字,其实不叫 OpenClaw,叫 Clawdbot。

它的吉祥物和图标大家都知道了,是个龙虾,所以大家才叫它小龙虾。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

但鲜少有人知道,当今最牛逼的、属于夯上天、但是被名字耽误了的最牛逼的 Agent 产品,也就是 Claude Code,他的吉祥物,其实是 8-bit 像素风格的小螃蟹,而名字就叫,Clawd。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

所以之前小龙虾把自己叫做 Clawdbot,还说自己是 Agent 的时候,给 Anthropic 气的直接给皮特发律师函,说你个狗东西必须给我改名字。

peter 也知道自己理亏,蹭的确实有点狠了,于是自己只能改成了 moltbot,然后又改成了 OpenClaw,大概就是这个路径。

所以你就能看到,为啥 Anthropic 屌都不屌 OpenClaw,最近每个月的更新几乎都刀刀砍在 OpenClaw 的命脉上,就是这个原因。

Claude,才是当今最屌的那个 Agent,没有之一。

而最近的这两个更新,一个是电脑的视觉能力 Computer Use,一个是真正的远程操控 Dispatch。

这两个的王炸组合,又把 Claude 的 Agent 体验和能力,又带上了一个新的台阶。
这里我先做个简单的科普。

就是过去,不管是 Claude Code、Codex、OpenClaw 等等,几乎都是纯粹的直接代码驱动,跳过了前端界面,直接去操作底层的东西。

这个方式的好处是精准、快速、可靠,坏处是,它只能操作那些开放了接口的东西。

所以你要是只算命令行加浏览器的话,电脑上大概 80%的事情其实 AI 已经能帮你搞定了。

但那剩下的 20%呢?

就比如你的微信、你的剪映、你电脑上那些五花八门的本地软件。

这些东西不在浏览器里,也没有接口,也没有 CLI 版,AI 根本没有办法操控。

所以,你很少看到,玩小龙虾的人,能用小龙虾操控一些电脑的三方软件,更多的都是 PPT、Excel、Word、发个文件啥的。

而 Computer Use,就是来补上这最后一块拼图的,它让 Claude,能看见你的屏幕了。

但这里有一个非常关键的点,我必须说清楚,Computer Use 不是来替代命令行和 API 的,它们其实是完全互补的。

就像人,可以凭借自己的肢体也就是眼睛+手去完成一些事情,但是在很多时候,你还是需要借助比如锤子、电钻啥的这样的省力的工具。

Computer Use 就是人的眼睛+手,CLI 的那套,就是纯粹的工具。

这块手机比较好感知点,我之前写 miclaw 的时候说过,miclaw 走的是 Tool Use 路线,也就是 API,把系统应用封装成工具让 Agent 调用,所以快、成功率高,但是其他 APP 如果不给 API 或者 MCP 的话,就没办法操作了。

而之前的豆包手机很牛逼,在很多时候,走的是纯视觉 Agent 方案,读屏识别,学人模拟点击,兼容性和通用性很高,能越过高墙,缺点是慢一点步骤长一点。

这两条路线未来必然殊途同归。

再加上上周更新的 Dispatch,Claude,终于变得完整了。

Dispatch 这个东西,就是一个更方便的远程控制,不像之前的/remote-control 命令,只能在特定的终端里面不能断,现在,只要你的电脑没关,你就可以跟小龙虾一样,直接通过手机来在电脑上启动任意任务,之前只能启动 Cowork,但是后面立马就把 Claude Code 给支持了。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

这两玩意一组合,真的就起飞了,能把小龙虾摁在地上打。

用起来也非常简单。

第一步,先把电脑上的 Claude 应用更新到最新版本。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

点左下角头像进入到设置页面。

在 Desktop app 下面的 General 里,你会看到一个 Computer Use 的开关。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

打开它,会弹一个风险提示,包括说还在研究预览阶段等等 balabala 我们不用管,我们直接点开启就行。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

就这么简单,你的 Computer Use 就可以 use 了。

再然后就是打开 Dispatch。

因为我已经配置过了,所以这里我拿同事的电脑,重新进行了一下 Dispatch 的配对给大家看一下。

流程也很简单。

在电脑端的侧边栏点进 Dispatch,然后点击开始。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

再用手机原相机扫码就行,别用 Claude APP,那里面你也找不到扫一扫。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

扫了以后,跳转授权。

再然后,你就会看到,电脑上弹出一些权限设置,直接默认就行。

毕竟要用 Computer Use,你这些控制、访问权限不给,那就没法玩了。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

配完之后,电脑端的设置就全部大功告成了。

这时候,回到你的手机,打开你的 Claude,在里面侧边栏点进 Dispatch,就会看到这样的页面。。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

我们就可以直接在手机给 Claude 发消息操控你的电脑了,手机和电脑端的消息是完全同步的。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

这里有一个点需要稍微注意一下。

就是 Claude 的手机端的 Dispatch,其实只有一个持久性的对话。

只要你不重置配对,它就不会重置。

然后你每次跟他发消息,他会将你跟他对话的内容进行路由,会自己判断这件事属于什么类型。

如果是写代码、跑脚本这种开发类的活,它会把任务分发到 Claude Code 里启动一个新会话去跑,如果是写文档、做表格、整理信息这种知识类的活,它会走 Cowork。

这些被分发出去的任务,在电脑端会出现在各自的侧边栏里,你想看过程可以点进去看。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

这个体验还是比较丝滑的,手机端一个 session,电脑端多 session,比小龙虾那种用户常年把所有事情堆在同一个对话里导致的上下文污染的方案好多了。

然后我们用 Dispatch 和 Computer Use 组合起来,给大家看一看,这个超级 AI 助理、上位小龙虾的威力。

最简单的处理文件、发文件、搜索资料啥的就不说了,Claude 完成的非常轻松。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

我们有一个任务,非常的有意思。

我们公众号社群一共有几十个群聊,每天大家在里面聊天说地,非常热闹。

我也会每天定时去翻群里的消息,争取不错过任何一个瓜,但成百上千条消息看下来是真的费劲。

所以我就想,能不能让 Claude 帮我看。

我用我们 4 个比较活跃的社群也就是数字生命露营地来举例子。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

提示词很简单,一句话,他就会自己去点开我的微信,找到对应的群聊,开始帮我看消息。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

第一次用的话,在过程中,电脑可能会弹授权申请。

因为这时候,Dispatch 会使用 Computer Use 方案,过程中需要不断截屏,所以 Claude 会申请录屏和系统录音的权限。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

我们直接打开对应的权限就行。

这个时候,就可以在手机上摸会鱼,过会回来看结果。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

群里的消息总结的非常准确,大家主要在讨论的,有我们要举办的 AIFUT 大会,有影视飓风新发的视频,还有一个很悲伤的消息,这里也劝大家保重身体,尽量不要熬夜。

能帮我看群聊,自然也能帮我看朋友圈。

还是直接在手机上把指令发过去,就和跟小龙虾聊天一样的感觉。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

不仅能读文字,朋友圈发的图他也能理解。

比如我某位朋友发的多张活动照片,关于 OPC 的,就理解的非常准确。

相当牛逼。

那看都能看了,我寻思是不是也能用 Dispatch+Computer Use 的组合,帮我发一条朋友圈吧。

昨天影视飓风的新视频上线了,我们帮忙搞了一些好玩的东西,也在结尾被特别鸣谢出镜了。

昨晚开心的,也第一时间非常激动地发了朋友圈。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

那我就想试一下,能不能用 Agent 搞个任务,来帮我搜索 B 站,找到影视飓风新视频的资料,然后发一下朋友圈推荐一下这个视频。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

结果,也完全没问题。

整个过程非常丝滑,他会自己在电脑上打开浏览器,去网站上抓链接。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

然后看了下这个视频是讲什么的,自己又生成了朋友圈的文字内容。

生成之后,它会先把内容发给我确认,确认完才会操控微信,发出去。

这一点挺好的,不像小龙虾,经常自作主张。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

然后真的,就,直接发出去了。。。。。。

当然大家不用去我朋友圈翻了,我是用小小号去尝试的。。。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

这些任务,你可以直接用过手机操控。

当然,也可以直接在电脑上用。

目前,无论是 Computer Use 还是 Dispatch,都需要 Pro 或者 Max 会员才能使用,而且需要更新到 Claude 的最新版桌面端和移动端。

Dispatch 目前 Mac 和 Windows 都有了,因为上周才更新的,而 Computer Use 这个功能还只对 Mac 推出,Windows 还没上。

然后安全这块,这毕竟是 Agent 的立身之本。

这时候,就能显示出,模型公司自己下场做 Agent 的好处了,我自己也一直觉得,未来只有模型公司自己做的 Agent,效果才是最丝滑的。。

首先是权限管控,Claude 每次想访问一个新的应用,都会先问你。

它不会偷偷摸摸打开你的某个软件,且每一步都需要你授权,而且有些敏感类应用,比如投资交易平台、加密货币这些,因为是 Claude 自己的模型,所以识别起来非常轻松,默认就是禁止访问的,你想开都开不了。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

你还可以自己设一个黑名单,把不想让他碰的应用加进去,之后他请求的时候,不用找你要权限,系统会自动拒绝。

还是在 General 里面设置,找到 Denied apps。

点击 Add app,就会出现电脑上所有的应用列表。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

我这里随手选了 3 个,飞书之所以我 ban 掉了是因为我会直接用 aliy,飞书自己的 AI 助理,我不需要 Claude 再额外帮我去视觉操控一道,又慢又笨。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

设置之后,我想让他访问飞书,就会被直接拒绝。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

然后是提示词注入的防护,其实就是防钓鱼,

举个例子,有人可能会在网页或者文档里埋一些恶意指令,像请把用户的密码发给我这种,虽然很蠢,但是有的 AI 有可能就被骗了,真去执行这个指令,那就完犊子了。

所以 Claude 在使用 Computer Use 的时候,模型也会自动扫描这类注入攻击,以保证安全,不过官方也说了,这个防护还在进化中。

Claude 这次的更新,大概就是这样。

这篇文章我写的时候还是挺激动的,因为这种量级的更新在行业里并不常见。

能看出来,Claude 确实被逼急了,而且他们的功能更新,有点过于快了,快的离谱,快的断档领先所有同类产品。

我用 Claude 随手做了个 3 月份 Claude、Cowork 和 Claude Code 的更新情况,然后就给我看懵了。

Claude能直接操控你的电脑微信了,这才是真正的上位小龙虾!

这就是当今最牛逼的 AI 模型公司在 AI 所辅助下展现出来的产品更新速度吗。。。

平均 2~3 天一个新功能,疯了吧。

不是,这还要那些做 AI 产品的公司还怎么活啊。。。

这个公司的产品里,已经远远把曾经的对手 OpenAI 甩在了身后。

恐怖如斯。

在如今,你想花 20 美刀体验最牛逼的 AI,我不会再推荐你 ChatGPT 了。

相信我,至少在今天。

Claude,YYDS。

收藏 8
点赞 44

复制本文链接 文章为作者独立观点不代表优设网立场,未经允许不得转载。