Agent World Model in the Wild: Computer-Use Agent Environment Synthesis
野外智能体世界模型:计算机使用智能体环境合成
🧭 训练环境合成 · CUA · RL ★ 深度解读
UNC-Chapel Hill · Microsoft Research · Georgia Tech · Northeastern University · Independent Researcher
开源流水线合成 GUI/MCP/CLI 跨界面环境与长程任务,用质量门控与 RL 训练出跨 8 个 OOD 基准泛化的 CUA 智能体
📌 工作参考价值(4 点)
- 对电商 Agent 训练:可借鉴 WildAWM 的「可执行世界 + 五类质量门控」生成带验证器的多步任务,尤其 Counterfactual Probe 能防 LLM 法官谄媚,适合审核购物车/下单/售后等长流程合成数据。
- RL 奖励设计:把最终成功与子任务 checklist 部分得分结合,给长程任务更密集监督;Format penalty 对 GUI 动作解析很重要,可迁移到 App 操控或网页购买 Agent。
- 全开源栈(GLM-5.2 + OpenCode)证明环境合成无需闭源模型,业务上可低成本自建仿真环境,不必依赖外部 API。
- 世界合成用 persona + multi-day day plan 积累状态,可生成带用户历史/商品/库存的连续环境,用于推荐或搜索 Agent 的长期交互训练。