From Atomic Actions to Standard Operating Procedures: Iterative Tool Optimization for Self-Evolving LLM Agents
从原子动作到标准操作流程:LLM Agent 的迭代工具自进化
🧭 Agent 工具自进化与工具集迭代优化 ★ 深度解读
Renmin University of China · Alibaba Group
迭代地从执行轨迹中提取可复用 SOP,并持续合并、评估、剪枝,实现工具集的自进化与精简。
📌 工作参考价值(4 点)
- 在电商/搜索推荐场景中,可借鉴 EVOSOP 的轨迹驱动的工具抽象:从 Agent 多次调用原子 API(查订单、发消息、改状态)的轨迹中,自动提取高频共现的动作序列并封装成 SOP,减少重复推理和 token 开销。
- 工具生命周期管理是工程落地的关键:必须配套合并与剪枝机制,否则工具集会快速膨胀导致决策质量下降。可设计类似 REVIEWER 的轻量级评判器,基于执行成功率、是否引发故障等信号自动淘汰低质工具。
- 非参数化自进化思路值得注意:无需微调 LLM,仅通过优化工具集就能持续提升 Agent 表现,适合模型已封装或不易训调的场景。同时,采用 checkpoint 与“按训练成功轮次选最优工具集”的策略,规避了 LLM 随机性的坑。
- 方法论上的“符号反向传播”类比(从行为轨迹中提取逻辑块固化回工具集)可迁移到复杂多步查询、多 Agent 协作的 SOP 自动发现,比如将跨服务调用的子流程封装成高级工具函数。