CLUE: Uncovering Social Context for Pragmatic Understanding
CLUE:通过发掘社交上下文实现语用理解
🧭 训练模型发现对话社会线索用于语用理解
Purdue University
用两阶段训练+GRPO奖励让模型自我发掘对话中的社会线索,准确率提升且推理 token 减少超 80%
📌 工作参考价值(4 点)
- 可借鉴 Grounded Information Utilization 奖励设计:在对话理解、用户反馈归因等场景,要求模型的新推断必须引用具体交互证据,并惩罚冗余推理,可显著压缩推理 token,降低线上成本。
- 两阶段训练方案适合小样本业务任务:先用监督证据推理教会模型引用上下文,再用 GRPO 强化,类似客服对话意图消歧、评论情感归因等标注数据少的场景可以低成本迁移。
- 推理 self-contained、不依赖外部 RAG 或知识库,适合低延迟 Agent 的对话理解模块,减少检索链路,同时输出可验证的证据引用。
- 评估中加入推理 token 效率指标,避免只追准确率导致 CoT 过度生成;跨域跨语言 F1 提升 9.3% 的结果说明该训练方式有泛化潜力。