The Last AI Built by Humans: Toward Genuine Recursive Self-Improvement
人类建造的最后一个AI:走向真正的递归自我改进
🧭 递归自我改进与Agent自治路线图
Shanghai Jiao Tong University · Theseus Labs · Tsinghua University · ByteDance · Shanghai AI Lab
提出递归自我改进的完整路线图与 Headroom-Closed Index,系统梳理从执行自治到元改进的演化路径
📌 工作参考价值(4 点)
- HCI(Headroom-Closed Index)可以作为衡量模型在特定任务上还有多少提升空间的诊断指标:在电商搜索/推荐场景中,可先用 HCI 评估当前 LLM 在 query 理解、意图改写、生成式推荐等任务中的能力天花板,避免在不值得投入的方向上做无谓的迭代。
- RSI 的自治等级框架可直接映射到推荐系统 Agent 的构建:先实现 improvement-execution autonomy(自动执行模型更新、策略调整),再逐步升级到 improvement-strategy autonomy(自动选择训练数据、loss 设计、超参搜索),最后尝试 experience-acquisition autonomy(自动从线上反馈中挖掘新经验)。
- 论文强调不同场景对 RSI 的要求和速度不同:电商推荐属于反馈信号密集、环境变化快的场景,更适合从经验获取自治切入;而生成式商品推荐(GenRec)需要结合 Semantic ID 生成与用户行为反馈,可借鉴 RSI 中环境适应自治的思路,让 Agent 自动调整生成策略以适配活动、季节等变化。
- 持续学习与元改进在推荐模型中的工程化落地:借鉴文中经验获取与递归元改进,可以在现有推荐模型迭代 pipeline 中加入自动化的数据选择、在线评估和策略回滚机制,减少人工调参,提升模型对新品类、新用户的适应速度。