Bridge Evidence: Static Retrieval Utility Does Not Predict Causal Utility in Multi-Step Agentic Search
论文用 ReAct 智能体重放 1000 道 HotpotQA 问题,对每篇已读文档做删除干预,以答案质量、下一跳检索质量和轮数变化定义反事实轨迹效用。23,322 个文档观测中,静态效用与因果效用几乎独立(Spearman ρ=-0.026),35.7% 文档属于静态低分却决定后续路径的“桥接证据”。
INSIGHT多步搜索中的好文档不一定直接包含答案,它可能只提供能改写下一条 query 的关键实体;高 OER 实体进入下一跳查询的概率是非区分实体的 4.02 倍。搜索系统若仍按单轮相关性训练 retriever,会系统性漏掉这类路径价值,实践上应增加轨迹级反事实标签或实体区分度特征。