UniPolicy: Unified Objective-Specific Policies for Generative Search Advertising
UniPolicy：生成式搜索广告的统一目标专属策略
🧭 生成式广告检索 · 多目标RL对齐 ★ 深度解读
Meituan
用目标前缀、MoE-LoRA路由和专属FFN解耦多目标生成式广告检索策略，在线提升CTR/RPS/收入
📌 工作参考价值（4 点）
- 多目标生成式检索不要简单 reward fusion：用 objective prefix token + 稀疏 MoE-LoRA + objective-specific FFN，在同一个生成骨干上做层级参数隔离，显著缓解 eCPM/CTR/相关性之间的梯度竞争。
- 利用多阶段行为日志构造 Click > Exposure > Miss 的 pairwise margin loss，把“曝光未点击”样本用起来，显式建模候选间相对偏好，能提升生成结果的 NDCG 和点击候选排序。
- 推理侧采用共享 KV cache 的并行多策略 beam search，业务可灵活分配各目标候选配额；固定候选预算下用 trim-and-backfill 兜底，P99 延迟只增加 2.5%，适合工业检索在线部署。
- 目标前缀 token 可控性强：单独输入 <eCPM>、<CTR>、<Relevance> 即可触发对应偏好，线上可以按活动或场景动态调整配额，复用到电商推荐/广告召回的多业务目标平衡。