Does generative AI supersede supervised XMLC? A Benchmark Study on Automated Subject Indexing with German Scientific Literature
生成式 AI 能否超越监督 XMLC?德国科学文献自动主题标引基准研究
🧭 多标签分类 · 长尾标签生成
Deutsche Nationalbibliothek
在极多标签分类中,整体指标监督 XMLC 更强,但长尾与分级相关性上 LLM 生成式方法更优
📌 工作参考价值(4 点)
- 电商商品打标存在大量长尾属性(如小众品类、风格标签),可尝试用 LLM 直接生成标签候选,再结合现有分类器做过滤或置信度控制,提升长尾覆盖率。
- 对于标签体系极大(百万级)且分布极不均衡的场景,传统 XMLC 方法的二进制指标更优,适合高精度自动打标;LLM 生成在需要人工审校的分级相关性场景中更友好,可考虑混合流水线:先用 XMLC 出高置信度标签,再用 LLM 补充长尾标签。
- 论文中使用的 LLM 生成策略(如基于指令微调、少样本提示)可作为构建推荐系统标签生成模块的起点,尤其在冷门商品或新类目自动打标时,可快速冷启动。
- 在评估阶段引入专业标注员的分级相关性判断,比单一自动评测更能反映业务真实价值。电商标签推荐也可设计类似人工评估环节,衡量标签的可用性而非仅命中率。