Mine and Refine: Optimizing Graded Relevance in E-commerce Semantic Search Retrieval
论文聚焦电商语义召回中的分级相关性、难负例误标和不同相关等级分数不可分三类问题。方法先用经行为数据审计微调的轻量 LLM 生成符合业务规范的多级标签,以标签感知监督对比学习建立全局空间;再挖掘难样本、重新标注,并用多级 circle loss 细化相似度分布,使召回分数更适合后续融合与排序。
INSIGHT其价值不只是“用 LLM 标注”,而是让同一套分级标签贯穿全局训练、难例挖掘与二阶段校准,避免把潜在相关但未曝光的商品当作负例。社区短文本搜索可把“完全相关、部分满足、主题相关、无关”显式编码进对比损失,并在 hard-negative 回流前复审,预计比单纯扩大负例池更稳健,也更利于稀疏与稠密分数融合。