Which Agent's Skill Should Change? Group-Relative Credit Assignment for Evolving Multi-Agent Teams
多智能体团队中该修改哪个智能体的技能?基于群体相对优势的信用分配
🧭 多智能体技能演化与信用分配 ★ 深度解读
Mayo Clinic · University of Manchester · Alibaba Token Hub, Alibaba Group · Shanghai University of Finance and Economics
GRSE 用同题多轨迹对比把团队 reward 归因到 agent-skill 并驱动技能修订,超越 MASkills
📌 工作参考价值(4 点)
- 多 Agent 推荐/搜索流水线(召回-粗排-精排-生成文案)出现 Bad Case 时,不要默认归咎于最终生成 Agent;复用 GRSE 的 group-relative 思路:同一 query 采样 4 条完整链路,比较高低 advantage 轨迹中每个 agent 的输入输出差异,定位真正需要修改的 agent-skill。
- 把业务规则/策略封装为自然语言 skill 库,只演化 skill 不动模型权重,适合在线迭代;用 structured failure diagnosis 的 8 类失败类型 + 引用具体 step + edit action,让归因可验证、可执行,并通过 validation gate 防止指标回退。
- 定期清理手写或迁移来的 skill 库:GRSE 证明 presence-based 信用会奖励“一路顺风但实际有害”的技能,而 group-relative 信用能正确 prune harmful skill(实验中对植入有害技能全部正确识别)。可用于技能库的巡检和跨场景迁移。
- 工程上注意:每组 G=4 轨迹训练 token 开销约 1.6-2.9x,但测试无额外开销;跨问题聚合时要按 distinct question 计数,避免重复采样同一问题虚高支持度;equal-reward groups 不丢弃,仍能提供一致失败/成功信号。