The Handoff Tax: Continuing Non-Native Trajectories in LLM Agents
交接税：LLM Agent 续接非原生轨迹的代价
🧭 LLM Agent 模型交接与成本-质量权衡 ★ 深度解读
AWS
首次系统研究 LLM Agent 中途切换模型时非原生轨迹对成本-质量权衡的影响，发现升级昂贵、降级更优
📌 工作参考价值（4 点）
- 在多模型路由/级联系统中，避免把低成本模型的完整对话历史直接交给高成本模型（Raw escalation），可改为只传递工作状态（如中间结果、已编辑文件）或压缩摘要，以减少 token 成本并避免低质轨迹锚定接收方。
- 降级场景（强模型转弱模型）中，保留强模型的轨迹（推理、工具调用）比只保留最终输出更重要，轨迹中的思考过程能帮助弱模型延续工作；因此可设计选择性的上下文保留策略。
- 使用归一化指标 QRec（质量恢复率）和 CSRet（成本节省保持率）评估切换策略，而非只看绝对成本或 pass rate，能更好对比不同模型对和切换接口的综合性价比。
- 难度感知切换：在易/中任务上模型切换通常不划算，在难任务上使用精简上下文（Traj-drop 或 Compact）才可能获得成本效益；可将任务难度估计纳入切换决策。