Exploring Scaling Laws of CTR Model for Online Performance Improvement
提出 SUAN 统一注意力网络和轻量版 LightSUAN,将 LLM 的 Scaling Law 范式迁移到 CTR 预估模型,已在美团线上部署。
INSIGHTCTR 模型也遵循类似 LLM 的 Scaling Law:在模型容量和数据量跨越三个数量级的范围内,性能提升可预测。LightSUAN 通过稀疏注意力和知识蒸馏平衡了效果和推理效率。
业务关联社区搜索的排序模型可借鉴 Scaling Law 指导资源分配——在给定计算预算下选择最优模型大小和数据量配比,实现 CTR 和 nDCG 的可预期提升。
证据在美团线上 A/B 测试中 CTR 提升 2.81%,CPM 提升 1.69%。Scaling Law 在模型参数量 1M-1B、数据量 10M-10B 范围内均成立。LightSUAN 推理延迟与基线持平。