An Emergent Mirage: Is Emergent Misalignment and Realignment Indeed a Robust Phenomenon?
涌现性对齐偏差现象的鲁棒性再检验：受表层特征混淆的伪象
🧭 LLM 错位与重对齐现象评估 · LoRA 表征分析
University of Maryland · Carnegie Mellon University
发现 Emergent Misalignment 与重对齐对数据集表层特征高度敏感，先前声称的机械签名不可靠
📌 工作参考价值（4 点）
- 微调模型时需警惕回答长度等表层特征混淆行为评估，在推荐对话或 Agent 任务中应控制输出长度差异，避免将风格迁移误判为策略改变。
- LoRA 微调后常以参数相变解释行为突变，该工作在安全领域发现相变与行为不相关，提示在电商用 LoRA 做用户表示或 item 表示更新时，不应仅凭表征空间跳变推断业务指标，需直接测量在线 A/B 指标。
- 设计评估协议时推荐使用连续、平滑的指标替代离散判断，并注意数据集构建时的隐式偏差（如 answer length prior），对推荐系统离线评估中 ranking metric 的选择也有类似启示。
- 若在推荐中应用类似对齐-错位场景（如恶意攻击微调），该结论提醒表象突然的性能崩塌可能来自数据构造，而非模型本质脆弱，安全审计需从数据源头排查。