PROMISE: Process Reward Models Unlock Test-Time Scaling Laws in Generative Recommendations
首次在生成式推荐中验证了 Test-Time Scaling Laws,提出 PRM 引导的 Beam Search 让小模型通过增加推理计算超越大模型。
INSIGHT生成式推荐中 Semantic ID 的层级生成与 LLM 的 Chain-of-Thought 推理存在结构性类比——早期生成错误会导致「语义漂移」,而过程奖励模型 (PRM) 可在每一步修剪错误分支,这为推荐系统的推理时扩展提供了全新范式。
业务关联对搜索排序系统而言,test-time scaling 意味着可以用较小模型+更多推理计算来替代大模型部署,在保持效果的同时显著降低在线服务成本,适合对延迟敏感的社区搜索场景。
证据离线实验表明小模型通过 PRM 引导搜索可超越更大基线模型;已在真实线上推荐系统中验证有效;首次在生成式推荐领域建立了鲁棒的推理时计算-性能幂律关系。