Differentiable Semantic ID for Generative Recommendation
DIGER 解决 Semantic ID 分词器只优化内容重建、无法接收推荐损失的问题,以 Gumbel 噪声和两种不确定性衰减实现端到端可微索引并抑制码本坍塌。在 3 个公开数据集上,B-Shop 的 NDCG@10 从两阶段基线 0.0331 提至 0.0376,I-Shop 从 0.0797 提至 0.0844。
INSIGHT关键不是继续扩大神经召回骨干,而是让索引空间直接服务排序目标:训练早期用随机探索覆盖更多编码,后期降低噪声贴近确定性推理。对短文本 UGC,可把帖子文本编码与下一次点击目标联合训练,减少“语义相近但兴趣不可区分”的 ID 冲突;论文已开源代码,适合离线小流量验证。