Diagnosing Search Behavior and Failure Modes in Long-Horizon Search Agents
论文固定检索器与 ReAct 框架,在 BrowseComp-Plus 的 830 个问题上比较 6 个长程搜索 Agent,并以人工文档相关性标注区分“没找到证据”和“找到但没用好”。累计召回与准确率相关系数达 0.99,而最终上下文规模仅 0.16;77%–94% 的搜索回合没有增加新证据。
INSIGHT长链路并不等于高质量,强 Agent 的特征是更少重复查询、更早命中证据并及时停止。线上系统应分别监控检索缺口与利用缺口:前者优化 query 改写和方向切换,后者加强证据核验与答案归一化;以证据覆盖驱动停止,比固定轮数或 token 预算更合理。