OpenGCUA!AI正式接管电脑和手机!Computer Use升级版!
现在的 AI 操控电脑基本就两条路。要么是 computer use 纯点击 GUI——本来一行命令能搞定的事,非要反复点来点去,AI 截图截到手软,你看 TOKEN 消耗账单时脚软;要么就是纯跑命令,遇到要操作图形界面的就傻眼。
通义千问团队刚开源的这个叫 OpenGCUA 的项目,就是把这两件事给统一了。它是一套让 AI 操控电脑的完整框架,模型自己决定什么时候截图、什么时候点鼠标、什么时候直接跑命令,不再每步都强制截图。效果上,平均每个任务少走 53% 的步数,分数还能再涨 19 分。
你只要有台 macOS 的苹果电脑,配置好 API key,接上 Deepseek 或者通义千问等大语言模型,AI 就能帮你操作桌面应用、跑脚本控制浏览器。比如让它帮你查邮件、填表格,做自动化都可以直接下指令。
更厉害的是,它支持跨设备统一接口,电脑、手机、浏览器用同一套接口就能控制。搞 AI agent 研究、自动化,或者想自己搭电脑控制智能体的兄弟,真心建议码住,先拿官方示例跑一遍,看看 AI 操控电脑这件事到底靠不靠谱。










