宝玉· @dotey · X·· 16 小时前AI 评分50
AI 导读
宝玉发布视频讲解 Computer Use 的实现原理:模型只负责看和想,真正操作电脑的是另一段程序,循环执行看、想、做、查。内容覆盖按钮定位的三种方式(截图、辅助功能、软件接口)、Mac 可后台运行而 Windows 需占用桌面的原因、新模型 GPT-6 Astra 的速度提升及数据来源,以及误操作的安全性问题。
正文 · 原文
Computer Use:AI 没有手,怎么操作你的电脑?Mac 为什么能后台?
你对 AI 说一句话,它就能在你的电脑上打开软件、点按钮,可它并没有手。这期讲明白它是怎么做到的:模型只负责看和想,真正动手的是另一段程序,一圈一圈地看、想、做、查。
回答四个问题:
它怎么知道按钮在哪,截图、辅助功能和软件接口各自怎么用;
为什么在 Mac 上它能躲在后台干活,在 Windows 上却要占着你的桌面;
新模型 GPT-6 Astra 变快了多少,这些数字出自谁;
它在你电脑上乱点,安全吗。
来源:宝玉 · x.com