Agent S4:智能体界面进化的研究
【US】接口该演化不该手写:Simular Agent S4,同模型 OSWorld 21.3%(3.8×)
反直觉:电脑用 agent 的上限常卡在人手写的接口与「何时用哪接口」知识。现有错处:只训策略、冻结工具面。作者改动:Agent S4——元 agent 从轨迹演化接口仓库,种群选择泛化。硬数字:Qwen3.8-27B + 演化仓库 OSWorld V2 开源 SOTA **21.3%** binary(同模型固定接口 **3.8×**);高于 GPT-5.5 **13.0%**、Claude Opus 4.8 **20.6%**,成本约其 **4.3%/1.5%**;ScienceBoard **41.4→58.6%**。可迁移判断:**明川:CUA 迭代把「接口仓库」当一等公民,禁只刷模型。不要并进 #14 Cache Engineering(那是 KV 成本),也不要并进昨版 OO-Harness。**
Agent S4 通过经验进化界面设计,展示了界面设计作为智能体能力的重要性,对模型和工具的改进具有互补作用。
Agent S4 (arXiv:2610.28601)
“View PDF HTML (experimental) Abstract: Computer-use agents are limited by the interfaces humans give them. An agent may type a spreadsheet c”
摘要:人类为计算机使用代理提供的界面限制了代理的能力。代理可能逐个单元格地输入电子表格,而一行代码就能完成;或者通过shell打印出文件中的所有两千行代码来查找一个函数。界面和何时使用每个界面的知识都是手工构建的,无法跟上新的应用、工作流程和模型的发展。我们认为界面设计本身应该是一种代理能力。我们介绍了Agent S4,一个自主的计算机使用科学家,它从任务经验中构建演化的代理界面。元代理检查任务代理在合成训练任务上的轨迹,没有成功标签,并在存储库中构建和修改界面和用法知识。基于群体的进化通过元代理从未见过的验证任务上的性能来选择进一步开发的存储库,优先选择能够推广到已见任务的变更。在OSWorld V2上,Agent S4,使用Qwen3.8-27B和演化的界面存储库,在开源计算机使用代理中达到了新的水平,达到了21.3%的二进制得分,是具有固定界面的相同模型的3.8倍。这超过了GPT-5.5(13.0%)和Claude Opus 4.8(20.6%),分别约为它们成本的4.3%和1.5%。在ScienceBoard上,演化的界面使用相同的模型将成功率从41.4%提高到58.6%。这些结果表明,有用的界面可以从经验中演化出来,使自主界面设计成为模型和利用进步的补充来源。我们在此https URL上开源了我们的代码。
| 主题: | 人工智能(cs.AI) |
| 引用方式: | arXiv:2610.28601 [cs.AI] |
| (或 arXiv:2610.28601v1 [cs.AI] 版本) | |
| https://doi.org/10.48550/arXiv.2610.28601 arXiv-issued DOI via DataCite (待注册) |
投稿历史
来自:Saaket Agashe [查看电子邮件]
[v1]
周二,20 Oct 2026 17:47:37 UTC (8,322 KB)
来源:Agent Control Flash News · arxiv.org
关联产品与深度拆解
Cursor Agent 架构全景拆解:从影子工作区到多文件推演引擎
全面剖析 Cursor 在 Agent 模式下的底层技术实现,解析影子分支隔离、LSP 上下文剪枝以及预测性补全的核心架构细节与工程实践经验。
Vercel v0 推出全新多 Agent 协作画布与实时全栈部署预览
动态速评:v0 正在从单一组件生成器演进为全栈应用搭建协作台,尤其是与 Neon/Postgres 的直连极大降低了全栈原型验证成本。