An Event is Worth One Token: Event Tokenization for Industrial-scale LLM Recommendation
论文指出现有 LLM 推荐把一次交互压成文本、Semantic ID 或少量类别特征,会持续丢失用户、物品、上下文与结果信号。AMBER 将完整时间快照压缩成一个可缓存的 Event Token,把“快照分辨率”变成新的扩展维度;工业排序和召回实验显示其改善计算—质量帕累托前沿,并可作为历史特征迁移到优化后的非 LLM 排序器。
INSIGHT值得借鉴的不是简单增加序列长度,而是提高每个行为事件携带的信息密度,并通过离线预计算隔离线上成本。社区推荐可把点击时的 query、内容语义、位置、停留与互动结果联合编码为事件 token,再让召回和排序共享,减少多套特征管线之间的信息损耗。