Taiji: Pareto Optimal Policy Optimization with Semantics-IDs Trade-off for Industrial LLM-Enhanced Recommendation
快手的 Taiji 让一个 7B 模型读用户画像和最近 50 条行为,推理“下一单会买什么”,输出编码后给广告排序模型当特征,或用来找最相似的用户借行为序列。思维链先“知道答案再反推”、按困惑度筛掉一半,强化学习的两个奖励权重按区分度自动调。线上 ADVV 涨 2.83%、收入涨 3.30%,长尾用户涨 5% 以上。离线奖励和评估用同一个排序模型,动态权重在偏好指标上只多 0.74%。