Tongyi-MAI open-sources OpenGCUA computer-use agent framework with GPT-6 Astra traces
Alibaba's Tongyi-MAI released OpenGCUA, an Apache-2.0 computer-use agent framework with evaluation traces for eight frontier models; on OSWorld-v2 GPT-6 Astra dropped from 102 to 34 steps per task.
🖱️ Tongyi-MAI 刚开源了 OpenGCUA,把「让 AI 自己动鼠标键盘替你干活」这条路上的一整套东西都摊了出来。 OpenGCUA 配了编号 arXiv:2610.22200 的技术报告,还一次放出 8 个前沿模型的评测轨迹——GPT-6 Astra、Claude Opus 5、Gemini 3.8 Flash、GLM-5.3-Flash、Qwen3.8-Max、Kimi K3、DeepSeek-V4.1-Flash 都在里面,Apache-2.0 许可。 现在做电脑操作 agent,最难受的是模型一看截图就开始瞎点,几十步绕不出一个任务,而换个模型结果又完全不一样,你根本不知道问题出在模型还是出在你的系统。OpenGCUA 报告里给的数是:在 OSWorld-v2 离线测试集上,他们那套设计把 8 个模型的平均部分得分从 45.3 拉到 64.9,每个任务的平均步数砍掉 53%,其中 GPT-6 Astra 从 102 步降到 34 步。更有意思的是最强和最弱模型的差距从 39.1 分收窄到 18.0 分——系统做对了,弱模型也能把活干完。 想自己上手,它给了一个跨设备 SDK:电脑、浏览器和手机一个统一接口,macOS、Android、浏览器和 Linux 都适配,Rust 内核加 Python 绑定。另外还有一个 macOS 真机测试用的菜单栏小工具,不过项目自己说这块还在初步开源阶段,心里有数再上手。 模型行不行,有时候取决于系统给不给它机会。 GitHub:https://github.com/Tongyi-MAI/OpenGCUA