今日场景社区搜索 (UGC 短文本搜索): 用户在社区平台搜索帖子、问答、评论等 UGC 内容。核心指标是搜索相关性 (nDCG) 和点击率 (CTR)。关注:语义匹配、query 理解、短文本召回、排序模型、LLM 在搜索中的应用。 — 评分 514 篇,入选 10 篇,分数 3.15 – 4.45

本期目录 · 10 篇
  1. 01MARCH: Multi-Agent Reinforced Self-Check for LLM Hallucination
  2. 02RLFactory: A Plug-and-Play Reinforcement Learning Post-Training Framework for LLM Multi-Turn Tool-Use
  3. 03Composer 2 Technical Report
  4. 04Environment Maps: Structured Environmental Representations for Long-Horizon Agents
  5. 05Team of Thoughts: Efficient Test-time Scaling of Agentic Systems through Orchestrated Tool Calling
  6. 06FinToolSyn: A Forward Synthesis Framework for Financial Tool-Use Dialogue Data with Dynamic Tool Retrieval
  7. 07Willful Disobedience: Automatically Detecting Failures in Agentic Traces
  8. 08The Cognitive Firewall: Securing Browser Based AI Agents Against Indirect Prompt Injection Via Hybrid Edge Cloud Defense
  9. 09AI-Supervisor: Autonomous AI Research Supervision via a Persistent Research World Model
  10. 10Efficient Benchmarking of AI Agents
LEAD STORY · 今日必读

MARCH: Multi-Agent Reinforced Self-Check for LLM Hallucination

RAG 系统中的幻觉问题严重影响搜索结果的可靠性。本文提出 MARCH 框架,通过三个专业化 Agent(Solver、Proposer、Checker)的协作流水线,利用刻意的信息不对称来避免验证者的确认偏误。Checker 仅基于检索证据(而非原始生成)独立验证原子命题,并通过强化学习(GRPO)优化各 Agent 的协作策略。在多个 RAG 幻觉检测基准上,MARCH 显著优于现有 LLM-as-judge 方法,F1 提升超过 8 个百分点。

相关 5新颖 4实用 5证据 4时效 5
4.45
综合分 / 5
KEY INSIGHT · 对业务意味着什么核心创新在于「信息不对称」设计:Checker 不接收原始 RAG 响应,仅根据检索到的证据片段独立验证命题,从而打破 LLM 自查的确认偏误循环。该方法可直接应用于搜索系统的答案质量校验环节——在社区搜索场景下,对 LLM 生成的摘要或答案进行事实核查。三 Agent 分工的 pipeline 设计易于工程集成,且通过 RL 自动优化协作策略,无需人工标注验证数据。
Zhuo Li, Yupeng Zhang, Pengyu Cheng, Jiajun Song, Mengyu Zhou, Hao Li, Shujie Hu, Yu Qin 等 11 人 · 2026-03-26 · arXiv

今日其余入选

9 篇 · 按综合排名
02 4.30

RLFactory: A Plug-and-Play Reinforcement Learning Post-Training Framework for LLM Multi-Turn Tool-Use

LLM 在多轮工具调用任务中表现不稳定。本文提出 RLFactory,一个即插即用的 RL 后训练框架,通过异步工具调用器和解耦的工具/训练架构解决工具异构性问题。框架引入工具反馈的 observation markers 重构 MDP,实现模型-工具-环境的闭环,并支持规则、模型判断、工具验证三类奖励信号。在 Search-R1 框架下,Qwen3-4B 在 NQ 数据集上达到 0.486 测试分数,超越了更大的 Qwen2.5-7B-Instruct-GRPO(0.473)。

INSIGHTRLFactory 的核心贡献是将多轮工具调用建模为完整的 MDP 闭环:模型输出 → 工具执行 → 观察标记 → 策略更新。这对搜索 Agent 的训练具有直接参考价值——搜索系统中的查询改写、召回、重排等工具链正是典型的多轮交互场景。框架的「即插即用」设计允许快速接入不同搜索工具,降低了 RL 训练的工程门槛。在 NQ 上小模型超越大模型的结果表明,RL 后训练比单纯增大模型规模更高效。

Jiajun Chai, Guojun Yin, Zekun Xu, Chuhuai Yue, Yiling Jia
Semantic Scholar·2025-08-31·Relevance 5 · Novelty 4 · Practical 4 · Evidence 4 · Timely 3
03 4.15

Composer 2 Technical Report

Cursor

Cursor 发布 Composer 2,一个专为 Agentic 软件工程设计的模型。模型采用两阶段训练:首先通过持续预训练提升编码知识,随后通过大规模强化学习提升端到端编码性能,包括推理、多步执行和长周期任务的连贯性。训练基础设施支持在真实 Cursor 工具环境中进行训练,并引入基于真实大型代码库的软件工程基准。该模型在 Agentic 编码任务上展现了强大的长期规划和工具使用能力。

INSIGHTComposer 2 的关键设计理念是「在部署环境中训练」——训练和推理使用同一套工具和环境结构,消除了训练-部署的分布偏移。这一思路对搜索 Agent 开发有重要启示:搜索系统中的 Agent 也应在真实搜索 API 和工具链环境中进行 RL 训练,而非在模拟环境中优化后再迁移。大规模 RL 用于提升多步执行连贯性的方法,可直接借鉴到多轮搜索 Agent 的训练中。

Cursor Research, :, Aaron Chan, Ahmed Shalaby, Alexander Wettig, Aman Sanger, Andrew Zhai 等 56 人
arXiv·2026-03-26·Relevance 4 · Novelty 4 · Practical 4 · Evidence 4 · Timely 5
04 4.05

Environment Maps: Structured Environmental Representations for Long-Horizon Agents

长周期 Agent 在复杂软件工作流中频繁出现级联错误和环境随机性问题。本文提出 Environment Maps,一种持久化、Agent 无关的结构化表示,将屏幕录制和执行轨迹等异构证据整合为结构化图。该表示包含四个核心组件:Contexts(抽象位置)、Actions(参数化操作)、Workflows(观察到的轨迹)和 Tacit Knowledge(领域定义和可复用过程)。在 WebArena 基准的五个领域上,配备 Environment Maps 的 Agent 显著提升了任务完成率。

INSIGHTEnvironment Maps 提供了一种将 Agent 交互经验结构化存储和复用的通用框架。对搜索 Agent 的启示在于:可将搜索过程中的查询-检索-判断轨迹建模为类似的结构化图,使 Agent 在后续查询中复用已有的检索策略和领域知识。该方法的 Agent 无关设计意味着可以在不同搜索模型之间共享环境知识,降低了重复探索成本。

Yenchia Feng, Chirag Sharma, Karime Maamari
arXiv·2026-03-26·Relevance 4 · Novelty 4 · Practical 4 · Evidence 4 · Timely 5
05 3.85

Team of Thoughts: Efficient Test-time Scaling of Agentic Systems through Orchestrated Tool Calling

现有多 Agent 系统通常依赖同质化模型配置,未能利用不同后训练架构的差异化专长。本文提出 Team-of-Thoughts,一个异构多 Agent 框架,将多种模型视为 Orchestrator 驱动范式下的专业化工具。引入两个新组件:Orchestrator Calibration(识别具有优越协调和综合能力的模型)和 Agent Self-Assessment(工具 Agent 自我评估领域专长)。在 AIME24 和 LiveCodeBench 等五个基准上,ToT 在数学推理和代码生成上持续优于单模型和现有 MAS 基线。

INSIGHT异构模型协作的思路对搜索系统有直接借鉴:可以将不同的搜索子模型(query 理解、稠密检索、稀疏检索、重排序)视为异构 Agent,通过 Orchestrator 根据查询特征动态组合最优的搜索流水线。Agent Self-Assessment 机制允许各搜索模块自评估其擅长的查询类型,实现自适应的多路召回策略选择。

Jeffrey T. H. Wong, Zixi Zhang, Junyi Liu, Yiren Zhao
arXiv·2026-02-22·Relevance 4 · Novelty 4 · Practical 3 · Evidence 4 · Timely 4
06 3.80

FinToolSyn: A Forward Synthesis Framework for Financial Tool-Use Dialogue Data with Dynamic Tool Retrieval

Fudan University

LLM 在金融领域的工具调用能力至关重要但现有数据合成方法存在「逆向合成」偏差——从预采样工具反推用户查询,导致生成的查询过于直白,无法反映真实需求的隐式、事件驱动特性。本文提出 FinToolSyn,一个正向合成框架,从角色指令和原子工具合成出发,经动态检索对话生成,构建了 43,066 个工具库和超过 148k 对话实例。该框架在金融场景上训练的模型在工具选择准确率和对话自然度上显著优于逆向合成基线。

INSIGHT「正向合成」vs「逆向合成」的范式对比对搜索 Agent 的训练数据构建有重要指导意义。搜索场景中的训练数据也常存在类似问题——从工具/API 反推查询会导致数据分布偏移。FinToolSyn 的动态工具检索机制(从大规模工具库中按需检索)可借鉴到搜索 Agent 的工具选择中,解决工具空间过大时的效率问题。

Caishuang Huang, Yang Qiao, Rongyu Zhang, Junjie Ye, Pu Lu, Wenxi Wu, Meng Zhou, Xiku Du, Tao Gui 等 11 人
arXiv·2026-03-26·Relevance 4 · Novelty 4 · Practical 3 · Evidence 4 · Timely 5
07 3.70

Willful Disobedience: Automatically Detecting Failures in Agentic Traces

Microsoft

AI Agent 日益嵌入真实软件系统,但其长执行轨迹(agentic traces)的验证极为困难——仅基于结果的基准测试会遗漏流程性错误。本文提出 AgentPex,从 Agent 提示和系统指令中提取行为规则,然后自动评估执行轨迹的合规性。在 τ2-bench 的 424 条轨迹(涵盖电信、零售、航空客服)上,AgentPex 能区分不同模型的 Agent 行为,并发现仅靠结果评估无法捕获的规范违规问题。

INSIGHTAgentPex 揭示了一个重要盲区:Agent 可能给出正确结果但过程违规(如不安全的工具使用、错误的工作流路由)。在搜索 Agent 中,这意味着即使最终检索结果相关,如果 Agent 绕过了内容安全检查或使用了未授权的数据源,也应被检测和阻止。从提示词自动提取行为规则的方法,可用于构建搜索 Agent 的自动化质量监控系统。

Reshabh K Sharma, Shraddha Barke, Benjamin Zorn
arXiv·2026-03-26·Relevance 3 · Novelty 4 · Practical 4 · Evidence 4 · Timely 5
08 3.55

The Cognitive Firewall: Securing Browser Based AI Agents Against Indirect Prompt Injection Via Hybrid Edge Cloud Defense

将 LLM 部署为自主浏览器 Agent 会暴露间接提示注入(IPI)攻击面。纯云端防御存在延迟和隐私问题。本文提出 Cognitive Firewall,一个三阶段分离计算架构,在客户端和云端之间分配安全检查:本地视觉 Sentinel、云端 Deep Planner、确定性 Guard。在 1000 个对抗样本上,纯边缘防御有 86.9% 的语义攻击漏检,而完整混合架构将攻击成功率降至 1% 以下(静态评估 0.88%,自适应评估 0.67%)。

INSIGHT搜索 Agent 的安全性是实际部署的关键挑战。Cognitive Firewall 的分层防御思路——边缘端过滤表示层攻击、云端进行深层语义分析——可直接应用于搜索 Agent 的安全架构。特别是在社区搜索场景中,UGC 内容本身可能包含恶意提示注入,Agent 在检索和处理这些内容时需要类似的多层防护。确定性 Guard 对副作用操作的约束机制也值得借鉴。

Qianlong Lan, Anuj Kaul
arXiv·2026-03-26·Relevance 3 · Novelty 4 · Practical 3 · Evidence 4 · Timely 5
09 3.45

AI-Supervisor: Autonomous AI Research Supervision via a Persistent Research World Model

现有自动化研究系统以无状态线性流水线运行,缺乏对研究全局的持久性理解。本文提出 AutoProf(Autonomous Professor),一个多 Agent 编排框架,通过持续演化的 Research World Model(基于知识图谱实现)为专业化 Agent 提供共享记忆,支持从文献综述到方法开发、评估、论文写作的端到端自主研究监督。框架引入结构化差距发现和自纠正更新机制,实现了 Agent 间的协作验证和迭代优化。

INSIGHTResearch World Model 的设计理念——用知识图谱作为多 Agent 共享的持久世界模型——对构建 Deep Research 类搜索 Agent 有直接参考价值。在搜索场景中,可将检索到的知识片段持久化为结构化图谱,支持多轮检索中的知识累积和差距分析。自纠正更新机制可用于搜索 Agent 在多轮交互中逐步完善检索策略。

Yunbo Long
arXiv·2026-03-26·Relevance 3 · Novelty 4 · Practical 3 · Evidence 3 · Timely 5
10 3.15

Efficient Benchmarking of AI Agents

AI Agent 的全面基准测试成本高昂,每次评估需要交互式 rollout、工具使用和多步推理。本文研究小任务子集能否在大幅降低成本的同时保持 Agent 排名。在 8 个基准、33 个 Agent 框架和 70+ 模型配置上发现,绝对分数预测在框架驱动的分布偏移下退化,但排序预测保持稳定。提出基于项目响应理论的中等难度过滤协议,将评估任务数减少 44-70% 同时保持高排序保真度。

INSIGHTAgent 评估中的「框架驱动分布偏移」是一个重要发现——同一模型在不同 Agent 框架下的绝对分数变化大,但相对排序稳定。这对搜索 Agent 的评估有实践指导意义:在比较不同搜索 Agent 方案时,应关注相对排序而非绝对指标。中等难度过滤的评估加速方法可直接用于降低搜索 Agent A/B 测试的成本。

Franck Ndzomga
arXiv·2026-03-26·Relevance 3 · Novelty 3 · Practical 3 · Evidence 4 · Timely 5

其他赛道今日

点击切换