MLLMRec-R1: Incentivizing Reasoning Capability in Large Language Models for Multimodal Sequential Recommendation
将 GRPO 推理训练范式扩展到多模态序列推荐,解决视觉 token 导致的 rollout 成本爆炸和奖励膨胀问题。
INSIGHT直接在多模态序列推荐上套用 GRPO 会导致训练成本随历史长度和候选集大小急剧膨胀;论文提出的 token 压缩和奖励校准策略显著降低了 MLLM 推理训练的门槛,使 reasoning 能力真正服务于推荐排序。
业务关联对于需要理解用户行为序列进行个性化排序的场景,该方法展示了如何让大模型学会「推理式推荐」——不仅匹配特征,还能解释推荐逻辑。可用于社区搜索中的复杂 query 理解和结果排序。
证据在多模态序列推荐任务上,相比基线 GRPO 方案训练成本显著降低,排序指标(如 NDCG@K)优于直接 CoT 监督方法;高训练奖励与实际排序性能的相关性得到修正。