ResearchMath-14K: Scaling Research-Level Mathematics via Agents
ResearchMath-14K:基于多智能体的研究级数学推理数据集构建与训练
🧭 多智能体数据合成与推理训练
Seoul National University · OneLineAI · Yonsei University
首个大规模研究级数学问题数据集,结合多智能体过滤的推理轨迹微调,平均提升开源模型9.2个百分点
📌 工作参考价值(4 点)
- 多智能体协同构建高质量训练数据:可借鉴该 pipeline 思路,用多个 Agent 分工采集、清洗、验证电商/推荐领域的复杂任务数据(如生成式推荐中的 Semantic ID 映射规则或 Agent 协作指令),减少人工标注成本。
- 利用不完美推理轨迹提升模型性能:即使模型生成的推理路径存在错误,通过 agentic filtering(如自动检查步骤一致性、引用真实性)仍可提取有用监督信号,适用于低资源场景下的推荐模型微调或 Agent 策略学习。
- 避免生成中的虚构引用:论文揭示新模型产生更多虚假参考文献的现象,迁移到电商场景中,在生成式推荐或 Agent 对话系统里需设计引用验证机制,防止捏造商品属性或虚假用户评论,提升可信度。
- 开源数据集与 Agent 过滤策略可直接复用:ResearchMath-14K 的数据构建方法和过滤代码或可改造,用于生成电商问答、多轮对话的推理轨迹,通过类似 self-consistency 和 citation check 的机制提高数据质量。