ATLAS: Agentic or Latent Visual Reasoning? One Word is Enough for Both
ATLAS:一个词同时实现Agentic与潜在视觉推理
🧭 视觉推理 · 功能token
用单一离散功能token统一agentic操作与潜在视觉推理,无需视觉监督,兼容标准训练
📌 工作参考价值(4 点)
- 功能token设计思路:在多模态对话或视觉Agent中,可将复杂视觉操作封装为离散token,避免生成中间图像,大幅降低计算开销。
- LA-GRPO训练技巧:当行为token稀疏时,用静态加权的辅助目标锚定功能token,可稳定强化学习训练,适合电商Agent中稀疏动作(如工具调用)的场景。
- 兼容性优势:功能token保持标准词表内,无需修改模型架构或训练流程,可直接融入现有LLM SFT和RL管线,工程移植成本低。
- 可解释性增强:功能token为内部操作提供明确语义锚点,便于业务中审计Agent决策路径,提升系统透明度。