EnvHarness: Awakening Static Worlds for Agent Learning
EnvHarness：可编程环境包装实现 Agent 定向学习
🧭 Agent 环境定制与自动化训练 ★ 深度解读
Washington University in St. Louis · Google Cloud AI Research · Google Cloud · University of North Carolina at Chapel Hill
提出 EnvHarness 可编程层与 EnvRigger 自动诊断循环，将静态环境改造成针对性训练环境，不改底层代码且保留原生验证器
📌 工作参考价值（4 点）
- 可借鉴 EnvHarness 的 Stage/Contract/Chain 包装思路：在不修改现有电商沙盒、对话仿真器等模拟器底层代码的前提下，通过接口层注入初始状态变化、动作约束和观察过滤，低成本生成大量定向训练环境。
- EnvRigger 的黑盒诊断-生成-验证循环适合迁移到客服/导购 Agent 的弱点修复：记录失败轨迹，自动写出限制快捷操作或强制验证行为的 wrapper 代码，并通过新鲜 rollout 接受/拒绝，实现策略与环境共演化。
- 在强化学习训练推荐/搜索 Agent 时，可利用 Contract 屏蔽高奖励但无学习价值的捷径（如直接推荐热门商品），迫使模型探索长尾策略；用 Stage 预设不同用户状态（新用户、低活跃、购物车状态），覆盖长尾场景。
- 保留原始 verifier 的做法值得采纳：所有环境改造通过标准 reset/step 接口完成，评估仍使用可信的人工验证器，避免生成式环境带来的评估失真问题。