Joint Optimization of Relevance and Engagement in Multi-Task Ranking for E-Commerce with Efficient LLM Supervision
针对单独优化点击和转化会让热门或价格锚定商品挤占语义相关结果的问题,DoorDash 在多任务排序中加入累积概率形式的序数相关性头,并用轻量 LLM 为超过 1 亿个 query-item 对生成三级标签。相关性 NDCG@10 从 0.812 升至 0.962;线上 ATCR、CVR 和成交额分别提升 1.16%、1.10% 和 0.50%。
INSIGHT相关性应进入最终价值函数,而不能只作为共享底座上的辅助任务;论文的辅助任务版本仅把 NDCG@10 提到 0.823,说明监督信号若不参与最终打分,收益会被参与度目标吞没。社区搜索可把语义相关性设为序数头,与 CTR 等目标联合训练,并通过可调权重在离线 nDCG 与线上互动之间画出可审计的权衡曲线。