← 全部深度解读
📖 深度解读 · PERSONALIZATION

Uncertainty as Remedy: Mitigating Satisfaction Label Bias in Short Video Multi-Objective Ensemble Ranking

Zonghe Shao, Tiantian He, Xiaoxiao Xu, Jiaqi Yu, Minzhi Xie, Jinfang Gu, Yongqi Liu, Kaiqiao Zhan, Kun Gai · Kuaishou · arXiv 2607.17092 · 发表 2026-07-19
7 分钟阅读时长 2783字 4.75综合分 第 1 名07-22 Personalization 日报
目录 · 6 节1问题与动机2方法详解3核心技术贡献4实验结果分析5局限与未来方向6工业实践意义
相关 5新颖 4实用 5证据 5时效 5
UAME 的关键不是在推理后用不确定性调分,而是在训练时提高高冲突样本对的权重;线上只保留均值分支,因此不增加排序阶段延迟。7 天、两组各占主 Feed 5% 流量的 A/B 测试中,长播提升 1.126%–1.614%,转发提升 1.325%–1.598%,适合迁移到 UGC 搜索中 CTR、停留、互动多目标冲突的精排融合。

1. 问题与动机

短视频推荐真正想优化的是用户的综合满意度,但这个变量无法直接观测。工业系统通常先用多任务模型估计点击、观看时长、长播、完播、点赞、关注、评论、分享等多个 pxtr,再把这些分数融合成最终排序分。问题在于这些行为只覆盖满意度的不同侧面,且经常给出互相矛盾的顺序:某视频可能更容易被点开,却不一定带来长播或正向互动。EMER、Pantheon、HarmonRank 等端到端融合方法虽然去掉了手工公式,训练时仍默认每个样本对、每个代理标签同样可信;一致样本容易主导梯度,真正决定满意度边界的高冲突样本反而学习不足。已有不确定性推荐方法大多在推理后以置信上界或分数校正做探索,没有把不确定性用于修正训练标签偏差。论文因此把核心问题改写为:能否从多目标冲突中学习样本级不确定性,并用它重新分配训练注意力,使代理风险更接近真实满意度风险?作者还利用问卷满意度作为近似真值,验证这种不确定性并非任意噪声:在 300 万样本上,它与代理标签偏差的 Pearson、Spearman 相关系数分别为 0.65 和 0.67。

2. 方法详解

UAME 接收用户、上下文、物料特征以及预训练 MTL 产生的多维 pxtr。任意 EMER 或 EASQ 主干先生成共享表示,顶部接两个轻量两层 MLP:均值分支输出满意度分数 μ,方差分支输出 log σ²,再通过指数函数保证 σ² 非负。于是每个候选不再是确定标量,而是高斯随机变量 N(μ,σ²)。对候选 i、j,假设二者条件独立,则分差仍为高斯;“i 排在 j 前”的概率等于标准高斯 CDF 作用于 (μ_i-μ_j)/sqrt(σ_i²+σ_j²)。论文对每一个 pxtr 构造二元成对标签,以该概率计算交叉熵式 probabilistic pairwise ranking loss。预测顺序正确时,优化会拉大均值差并缩小方差;标签冲突时,模型可增加方差表达不确定,而不是被迫输出折中分数。

单靠概率损失存在把所有方差无限放大的捷径,因此作者加入方差正则项。为让方差明确对应多目标冲突,又按某物料在不同 pxtr 排名中的标准差构造不确定性辅助成对标签,以 logistic loss 约束高冲突物料应有更大方差。随后把一对物料的综合不确定性定义为 σ_i+σ_j,在当前候选集合内做 min-max 归一化,并以缩放因子 γ 放大高不确定样本对的权重。最终损失由加权的多 pxtr 概率排序损失、方差正则和辅助约束共同组成。实现中用户/物料 embedding 为 32 维,pxtr embedding 为 8 维,Adagrad 学习率 0.001;正则系数 α=0.02、辅助损失系数 β=0.1、权重缩放 γ=2。线上服务只用 μ 排序,σ 分支及所有成对计算仅在训练期存在,因此不改变原在线排序链路,也不增加排序阶段推理延迟。

3. 核心技术贡献

第一,论文把多目标冲突从“要消除的噪声”转化为可学习信号:方差不是泛化意义上的模型置信度,而是同一用户—物料在多个行为代理下排序冲突的量化。第二,它推导出解析的高斯成对胜率,把均值排序与不确定性联合训练;相较 RankDist、EBRank 只在推理阶段调分,UAME 直接作用于优化过程。第三,样本级自适应权重专门强调高冲突物料对,区别于 ANSL 按损失大小衡量一般“困难样本”,理论上通过代理风险分解把这种权重与真实满意度偏差联系起来。第四,方法是主干无关的插件:在 EMER 与 EASQ 两种结构上均取得增益,且上线时裁掉方差支路,实现训练复杂、服务简单。相对 EMER,关注预测 GAUC 从 0.684 提至 0.724,最高相对增益 5.8%;相对 EASQ,长播 GAUC 从 0.668 提至 0.763,增益 14.2%,点击 GAUC 从 0.672 提至 0.734,增益 9.2%。

4. 实验结果分析

离线数据来自拥有数亿 DAU 的工业短视频平台,指标覆盖八个核心 pxtr,并以更符合个性化排序的 GAUC 为主。关键结果如下:

主干/指标基线UAME相对变化
EMER-pCTR0.7060.715+1.3%
EMER-关注0.6840.724+5.8%
EASQ-pCTR0.6720.734+9.2%
EASQ-长播0.6680.763+14.2%
问卷满意度 NDCG@50.37530.4080+8.71%
问卷满意度 HR@50.81920.9063+10.63%

在线实验持续 7 天,EMER 与 EASQ 两组各分配主 Feed 5% 流量,所有报告指标 p<0.005。对 EMER/EASQ,长播分别提升 1.614%/1.126%,点赞提升 0.939%/1.349%,关注提升 0.641%/1.299%,转发提升 1.325%/1.598%;留存 LT7 仅提升 0.009%/0.015%,说明短期满意度与长期留存之间仍有明显信号衰减。问卷真值评估中 NDCG@10 提升 7.44%、MRR 提升 8.62%,支持模型确实更贴近综合满意度,而不只是重新分配某个代理指标。消融结果表明去掉不确定性正则、辅助约束或自适应加权都会退化;超参呈倒 U 型,α=0.02、β=0.1、γ=2 最优,过大的 γ 会制造极端权重并使训练不稳。论文未公开曲线中的逐点消融数值,这是结果可复核性上的缺口。

5. 局限与未来方向

论文没有独立的 Limitations 章节,也没有在结论中系统陈述限制。正文可以确认的边界包括:实验只来自单一大型短视频平台;数据规模、样本构成、特征集合及问卷采样策略未公开;训练硬件、batch size、训练时长也未给出,因此外部团队无法完整复现。理论分析依赖“pxtr 冲突与预测不确定性正相关”的经验假设,虽然 300 万样本的相关性提供支持,但相关并不证明方差只由满意度偏差造成,曝光偏差、分布漂移与偶发行为也可能贡献方差。线上长期指标提升远小于互动指标,尚不能证明该方法会改善数周或数月留存。未来应在不同内容形态、不同代理标签数量和跨域冷启动下验证,并比较问卷、主动负反馈、重复消费等多种满意度真值。

6. 工业实践意义

对社区搜索与推荐,最值得采用的是“冲突诊断—训练加权—服务裁枝”三段式。先统计点击、长停留、收藏、评论、关注等目标对同一候选对的排序冲突,再以双头模型学习均值与 log 方差;训练时用方差找出代理偏差最大的样本对,服务时仍输出单一排序分。这样能保留现有精排主干、特征平台和 serving 接口,工程风险低于重写多目标架构。上线前应建立三层验收:离线看各目标 GAUC 与问卷/人工满意度 NDCG,灰度看互动指标是否一致改善,长期看留存与内容生态是否被高互动目标透支。需要避免把方差直接当作“坏内容”惩罚,否则会再次退化为后处理调分;它在本文中的价值是告诉优化器哪些样本更值得学习。还应监控方差分布漂移、min-max 归一化的极值敏感性和成对样本数量带来的训练成本,并复用作者的 log-variance、分母小常数和训练期分支裁剪做数值与延迟保护。

← 全部深度解读 出现于报告:2026-07-22 · Personalization #1 (4.75) 原文 ↗