Aligning Recommendations with User Popularity Preferences
本文研究推荐系统中的流行度偏差问题，提出 Popularity Quantile Calibration 度量框架来量化用户历史流行度偏好与推荐结果之间的不对齐程度。基于此提出 SPREE，一种面向序列推荐模型的推理时激活引导方法——在表示空间中识别流行度方向，并根据每位用户的个人流行度偏好自适应地调节模型激活，实现个性化的流行度校准。
INSIGHTSPREE 的核心创新在于将 activation steering 技术应用到推荐场景。与需要重训练的去偏方法不同，SPREE 仅在推理时调整模型表示，无需修改训练流程，部署成本极低。对于 UGC 搜索场景，这种方法可以帮助平衡热门内容与长尾内容的曝光，避免「马太效应」，提升内容生态多样性。
1. 问题与动机
推荐系统中的流行度偏差是一个广泛存在的问题：系统倾向于过度推荐热门物品，导致「富者愈富」效应和内容同质化。论文从多利益方角度分析了危害：创作者受到经济损害（长尾内容被压制）、用户满意度下降（推荐不匹配个人偏好）、平台面临创作者流失和监管风险。
关键洞察：现有方法将流行度偏差视为全局去偏问题（如降低所有用户对热门物品的曝光），但实际上不同用户对流行度有不同偏好——有人喜欢热门，有人偏好小众。因此，问题的本质是用户级别的对齐（alignment），而非全局的流行度压制。
现有度量指标（PopLift、LogPopDiff、UPD）在度量理论上存在缺陷：缺乏方向性（D1）、大小敏感性（D2）、方差捕捉（D3）、尺度不变性（D4）或鲁棒性（D5）。这导致干预效果的评估不可靠。
2. 方法详解
度量框架：Popularity Quantile Calibration
基于度量理论的四阶段框架设计新指标：
将物品流行度映射到分位数空间 τ ∈ [0,1]，比较用户交互历史的流行度 CDF 与推荐列表的流行度 CDF。完美校准时两者对齐于对角线 τⱼ = τ̂ⱼ。
Popularity Calibration Error (PCE) 定义为：PCE(u) = (1/m) Σ(τⱼ - τ̂ⱼ)²，范围 [0,1]，0 表示完美校准。该指标同时满足 D1-D5 所有度量理论要求。
缓解方法：SPREE (Steering PopulaRity toward human prEferEncEs)
SPREE 是一种推理时激活引导方法，无需重训练：
步骤一：识别流行度方向 构建对比数据集——高流行度序列 𝒟⁺（物品流行度 s(i) ≥ ρ⁺）和低流行度序列 𝒟⁻（s(i) ≤ ρ⁻）。在 Transformer 每一层每个位置计算引导向量 v = normalize(x⁻_mean - x⁺_mean)。通过线性探针精度选择最优层和位置。
步骤二：自适应引导强度 对每个用户估计中位分位数偏差 e(u) = τ̂_med - 0.5（负值表示推荐过于小众，正值表示过于热门）。用 Lasso 回归训练偏差估计器 f̂: ℝᵈ → [-0.5, 0.5]。
推理时修改激活：x* = x + λ · f̂(x) · v，其中 λ 是全局超参数控制引导强度。关键在于 f̂(x) 提供了每用户的方向和强度自适应。
训练配置：基座模型为 SASRec（L=3 Transformer 块，d=64 隐维度，序列长度 T=200-300）。对比数据集各生成 500 条序列，Lasso 回归用验证集拟合。
3. 核心技术贡献
度量理论驱动的度量设计：不同于经验性的指标设计，论文从度量理论出发系统化地分析了现有指标的缺陷，提出满足完整度量理论要求的 PCE 指标。实验表明 IPR 和 PopSteer 虽降低了全局流行度（S1 类偏差），但在 PCE（S3 类用户级对齐）上反而恶化。
个性化 vs 全局去偏的分离：论文首次在实验中清晰地分离了「降低全局流行度」和「用户级对齐」两个目标，证明了它们不仅不等价，甚至可能冲突。这挑战了流行度去偏研究中的隐含假设。
直接激活空间干预：与 PopSteer 需要训练稀疏自编码器（SAE）不同，SPREE 直接在激活空间中操作，通过均值差构建引导向量，部署更加轻量。偏差估计器 f̂ 的引入使得同一引导向量对不同用户产生不同的修正幅度和方向。
4. 实验结果分析
四个数据集（Foursquare Tokyo 49.5万交互、MovieLens-1M 100万交互、MovieLens-20M 2000万交互、RateBeer 263万交互）上的结果：
| 数据集 | 方法 | PCE@100 | NDCG@100 | 变化 |
|---|---|---|---|---|
| ml-1m | Base | 0.211 | ~6.34 | - |
| ml-1m | IPR | 更差 | 更差 | 两维度均退化 |
| ml-1m | PopSteer | 更差 | 略降 | PCE 恶化 |
| ml-1m | SPREE | 0.176 (-16%) | ~6.34 | PCE 显著改善，NDCG 保持 |
| ml-20m | SPREE | 0.382 (-9%) | ~9.01 | 两维度均改善 |
| RateBeer | SPREE | 0.293 (-9%) | 略升 | 两维度均改善 |
关键发现：IPR 和 PopSteer 在降低全局流行度的同时恶化了用户级对齐——这是本文最重要的实验发现，说明「去偏」和「对齐」是两个不同的目标。
消融实验：去除偏差估计器 f̂（即均匀引导）后，PCE 在 fs-tky 上恶化 143%（0.200→0.509），在 ml-1m 上恶化 106%（0.176→0.434），NDCG 也出现 7-22% 的退化。这证明个性化的引导强度是方法成功的关键。
校准曲线分析：基座模型在 ml-1m、ml-20m、RateBeer 上呈现负偏差（曲线低于对角线），即推荐内容比用户偏好更小众。SPREE 将校准曲线推向对角线，而 PP 方法则过度校正产生正偏差。
5. 局限与未来方向
论文明确讨论了三个局限：(1) 引导效果依赖于嵌入空间中是否存在流行度校准区域——如果物品嵌入空间的几何结构不支持流行度维度的线性分离，引导效果受限；(2) 当前方法聚焦于中位数分位数（τ=0.5）的控制，无法选择性地调节分布的上下尾部；(3) 仅处理流行度维度的对齐，未扩展到其他维度（如类型多样性、少数群体内容曝光）。
6. 工业实践意义
零成本部署：SPREE 仅修改推理时的激活值，无需重训练模型、无需修改训练数据或损失函数。对于已部署序列推荐模型的团队，可以在不影响现有训练流程的情况下引入流行度对齐。
PCE 作为评估工具：即使不使用 SPREE，PCE 指标本身就是一个有价值的评估工具。建议团队将 PCE 纳入离线评估体系，监控推荐结果与用户流行度偏好的对齐程度。这比全局流行度分布统计更有意义。
UGC 搜索场景应用：在社区搜索中，热门帖子和小众优质内容的曝光平衡是核心挑战。SPREE 的个性化引导可根据用户的历史行为自适应调节：对偏好热门的用户保持热门推荐，对偏好小众的用户增加长尾内容曝光，避免一刀切的去偏策略。
延迟影响：引导操作仅涉及一次向量加法（x + λ·f̂(x)·v），计算开销可忽略不计。Lasso 回归的偏差估计也非常轻量。这使得 SPREE 适合对延迟敏感的在线推荐场景。但需注意，对比数据集构建和线性探针选层需要离线准备，且随着模型更新需要定期刷新引导向量。
Alibaba