ArcANE: Do Role-Playing Language Agents Stay in Character at the Right Time?
ArcANE:角色扮演智能体能否在正确时间保持角色性格?
🧭 角色扮演智能体评估 · 心理轨迹一致性
Graduate School of Data Science, Seoul National University
提出 ArcANE 基准,用“角色弧”评估角色扮演智能体在心理轨迹上的动态一致性,发现弧上下文在未见场景中优势最大。
📌 工作参考价值(4 点)
- 客服/虚拟人个性演化:为长期用户交互的电商客服或直播虚拟人设计阶段性人设档案,借鉴“角色弧”按交互阶段调整回复倾向,避免机械一致。
- 对抗性评估样本构造:用“相同场景跨阶段提问”和“文本外推演情境”生成难度分层的测试用例,探测模型在未见情境下的性格漂移,用于业务人格 agent 的鲁棒性评估。
- 上下文策略组合:在构造角色 prompt 时,除摘要和检索片段外,加入按时间线标注的心理状态描述(弧),可显著提升角色一致性,尤其适合长会话或连载式互动。
- 微调数据构造:用小说角色弧数据微调基础模型,能明显改善对人物心理变化的捕捉,可用于训练具有动态人格的对话推荐或导购 agent。