SkillForge: Co-Evolving Skills and Agents via Dynamic Skill Lifecycles
SkillForge:以动态技能生命周期协同进化技能与智能体
🧭 Agent 技能库生命周期管理 ★ 深度解读
Institute of Computing Technology, Chinese Academy of Sciences · University of California, Merced · Tsinghua University
用 fitness 驱动的技能生命周期和 LLM 变异,让技能库与 RL 策略协同进化,避免低效技能污染上下文
📌 工作参考价值(4 点)
- 技能/工具/规则库不能 append-only:在电商 Agent 或导购 SOP 库里,为每个技能维护 usage 与 success 计数,计算 fitness,并设置预退休与运行时退休机制,主动淘汰过期或低效条目,避免上下文被污染。
- 生命周期状态机可直接落地:用 trial/active/stable/retired 四态加 hysteresis(stable 先 demote 才能 retire),既保护已稳定技能不被瞬时波动误杀,又能快速淘汰长尾低质技能;generation-aware 保护期可迁移到新上线的工具或规则。
- LLM 变异可用于自动优化 prompt/SOP:按 1−fitness 加权选择低效技能作为 parent,结合失败轨迹让教师模型改写生成 trial 子技能,再通过真实反馈决定去留;这可用于电商导购话术、搜索 query 生成策略的持续自动迭代。
- 预退休阶段值得借鉴:在把外部知识、规则或技能注入线上 RL 或 SFT 数据前,先用 base model rollout 做一轮离线 fitness 评估,过滤掉低质量种子,能显著降低训练噪声,提升最终性能。