SSR-GRPO: Integrating Supervision and Semantic IDs into Reinforcement Learning for Dense Retrieval in E-commerce
SSR-GRPO 面向电商稠密召回中的复杂语义和强化学习噪声,联合使用 Semantic ID 与向量表示进行双视角相关性评估。方法利用层级 Semantic ID 挖掘难负样本,一路通过掩码过滤同组噪声,一路构造 Retrieval-DPO 正负对,再与 GRPO 训练结合。论文报告了离线、在线实验,并称已部署于大规模电商平台。
INSIGHT对 UGC 短文本搜索,Semantic ID 不只是物品编码,也可作为难负样本分组信号,帮助 RL 训练区分“主题相近但意图不同”的内容。落地时应先复现双视角相关性标注和噪声掩码,再评估 DPO 对 nDCG、CTR 与召回覆盖的共同影响,避免只优化离线 top-K。