Visual Para-Thinker++: A Single-Policy Multi-Agent Framework for Visual Reasoning
视觉并行思维者++:单策略多智能体视觉推理框架
🧭 多模态多智能体协作与推理优化 ★ 深度解读
Zhejiang University · Hunan University · Tianjin University · University of Chinese Academy of Sciences · Shanghai Jiao Tong University
提出单策略多智能体视觉推理系统,通过角色解耦优化和KV缓存复用减少幻觉,在六大基准上超越单轨迹方法。
📌 工作参考价值(4 点)
- 多 Agent 单策略架构:一个大模型通过角色词元条件化为多个子 agent,共享权重,降低部署成本,适合电商推荐系统中的多任务协作(如意图识别、对话管理、商品推荐)。
- 角色解耦优势分配:将不同角色的奖励和优势仅作用于对应词元段,避免梯度冲突。在推荐 Agent 中,可对规划、执行、总结模块分别设计奖励信号,精细优化。
- 固定任务分配模式:定义了两种固定分配模式(分块和扫描序),避免开放式规划的不稳定性。在商品搜索与推荐任务中,可以预定义子任务划分(如属性识别、价格比较、用户评论分析)来提升并行推理可靠性。
- KV 缓存复用推理引擎:通过共享视觉前缀并分叉生成 Worker 序列,显著降低多 Agent 推理的显存和时间开销,适合在线推理场景,可应用于多路召回或并行探索的推荐系统。