Beyond Monolingual Deep Research: Evaluating Agents and Retrievers with Cross-Lingual BrowseComp-Plus
Deep research Agent 通常被要求检索证据、对来源推理并给出有依据的答案,但现有 browsing 基准默认 query 与证据同语种,无法回答"证据在另一种语言时 agentic search 还能否工作"。论文提出 XBCP(Cross-lingual BrowseComp-Plus),保留 BrowseComp-Plus 的英文问答空间,只改变支撑文档的语言:cross-lingual 设定下每个 query 配单一指定语言的证据,multilingual 设定下整个证据库随机均匀分布到 12 种语言。基准用于系统衡量检索器与 Agent 在跨语言证据下的检索-推理能力。
INSIGHT该基准把"证据语言"作为受控变量单独剥离,揭示 deep research 在跨语言场景的真实短板——这正是中文社区搜索面对外文资料时的痛点。启示是:跨语言召回质量直接决定 Agent 上限,单纯堆强 LLM 不够;评测搜索 Agent 时应单独考核跨语言证据定位与整合,而非只看同语种问答。