Beyond Memory: Harnessing Long-Horizon Agents with Explicit Belief States
超越记忆:用显式信念状态驾驭长程智能体
🧭 长程 Agent 信念状态维护与恢复 ★ 深度解读
Nankai University · Alibaba Group · Tsinghua University
提出 PoS 框架,通过显式信念状态、一致性验证与卡住感知恢复提升长程 LLM Agent 表现
📌 工作参考价值(4 点)
- 在电商/搜索/推荐场景的 Agent 中,用 Entity-State-Relation 结构化信念替代原始轨迹摘要,把“仍需知道什么”(epistemic gaps)和“仍需完成什么”(achievement gaps)分开显式维护,作为每步 action selection 的上下文,避免长会话中状态混淆。
- 引入独立 Belief Sentinel 校验模块(可用同一 LLM 角色分离),在每次信念更新后检查内部一致性(如冲突的实体状态)和外部一致性(与新 observation 是否矛盾),显著降低错误状态污染后续决策的风险。
- 对多轮交互 Agent(商品导购、售后诊断、搜索会话)增加“卡住检测”:监控窗口内 gap persistence、progress stagnation、belief recurrence 三个信号,一旦检测到 Belief Trapping,按动态模式(static/cycle/drift)和 gap 类型注入恢复约束,如抑制无效动作、强制获取判别证据或制造目标状态变化。
- 注意成本均衡:信念维护会增加总体 token 成本,但能降低 Task Agent 的无效 token 消耗和提升成功率;实际业务可先用轻量校验器、缓存信念或降低更新频率,在关键长程任务中开启完整机制。