Dual-Stream MLP is All You Need for CTR Prediction
主流 CTR 模型都是双流结构:一路用乘法显式构造特征交叉,一路用 MLP 隐式学习,两路输出直接相加。结构越复杂越难调,乘法那一路的输出还会随交叉阶数变大,相加时容易压过 MLP 那一路。DS-MLP 让最终模型只剩两个普通 MLP:一个通过知识蒸馏学会老师模型的显式交叉,另一个从零学习、补上老师漏掉的模式,两路先做批归一化,再各自用点击标签监督。先把老师变成同构的 MLP,再对齐融合。三个公开数据集上 AUC 都排第一,但 Criteo、Avazu 上只领先最强基线 0.0003 和 0.0006,只有 MovieLens 领先 0.0035。