Not All Candidates are Created Equal: A Heterogeneity-Aware Approach to Pre-ranking in Recommender Systems
HAP 提出异构感知自适应预排序方法,发现预排序阶段训练数据中存在梯度冲突问题——困难样本主导训练而简单样本未被充分利用。通过将候选分为不同优化路径,对简单候选使用轻量级模型、对困难候选部署更强模型,在不增加计算开销的情况下提升预排序效果。已在今日头条生产系统部署 9 个月,并发布了工业数据集。论文被 WWW'26 接收。
INSIGHTHAP 揭示了预排序阶段一个被忽视的核心问题:候选的异构性导致统一模型存在梯度冲突。其解决方案的巧妙之处在于对候选进行难易分流,用不同复杂度的模型分别处理,在保持整体延迟不变的同时提升效果。这对搜索系统中粗排/预排序阶段的优化有直接启示:并非所有候选都需要同等复杂度的打分,分层处理可以在效率约束下获得更好的排序质量。