LLM | | arXiv:2606.26246

Lacuna: A Research Map for Machine Learning

Lacuna:机器学习研究地图

🧭 科研文献知识图谱构建 · LLM Agent

Tiptree Advanced Systems Corporation · Mila · Polytechnique Montreal · McGill University · Universite de Montreal

Martin Weiss, Miles Q. Li, Alejandro H. Artiles, Yacine Mkhinini, Chris Pal, Hugo Larochelle 等

用LLM将论文转化为可导航研究地图,在文献检索和深度调查报告任务上超越OpenScholar与GPT-Researcher

📌 工作参考价值

  • 商品知识地图构建:借鉴Lacuna用LLM将非结构化论文转化为结构化摘要、概念、方向的方法,可对商品描述、评论、问答生成商品知识图谱(核心卖点、使用场景、竞品对比、搭配提案),作为推荐系统的可解释索引。
  • 多阶段深度推荐代理:Lacuna Deep Research的检索→分析→报告流水线可直接迁移至复杂购物决策场景(如“帮我选一台适合视频剪辑的笔记本”),通过多轮检索商品知识、对比分析、生成个性化购买指南,提升用户体验。
  • 可追溯证据增强推荐可信度:每个知识条目保留原始论文链接的设计,可改为在推荐解释中附带用户评论原文、评测视频等来源,增强推荐的可信度与透明度。
  • MCP接口集成现有链路:论文开放的MCP接口设计,允许将地图作为工具接入任意LLM代理,电商系统可参照此模式,将商品知识库封装为标准化工具,供客服机器人或购物助手调用。

动机:科学文献爆炸增长,研究人员需要更高效地浏览、引用和构思。现有工具仍将论文视为孤立PDF,缺乏可重用的结构化中间知识。Lacuna意图构建一个可导航、可扩展的研究地图,让人和代理能直接基于论文衍生的结构化概念开展研究。

方法关键点:

  • 用LLM将每篇论文转化为论文摘要、概念元素、研究方向、研究提案四类结构化对象,并保留与原始论文的双向链接。
  • 构建成大规模知识地图,提供Web、Markdown和MCP接口(Model Context Protocol),方便人类浏览和代理调用。
  • 在此基础上开发了Lacuna Deep Research代理:它是一个多阶段报告生成系统,先检索地图中的相关概念和论文,再逐步分析、综合,最终生成带有引用的深度调查报告。

关键结果:

  • 在LitSearch检索任务上,Lacuna的Recall@10达0.538,显著优于OpenScholar v3的0.424。
  • 在Multi-XScience-CS/ML和ScholarQA-CS-ML上也全面优于OpenScholar。
  • 在ReportBench-ML的25项调查任务中,Lacuna Deep Research获得0.052 citation F1(GPT-Researcher仅0.039),0.339 citation precision(vs. 0.290),99次专家引用命中(vs. 72),报告质量RACE评分7.82/10(vs. 5.24)。