2026-03-11 周三 · Agentic

独立报告页 · 在站内浏览(含往期切换)→
Generative生成式推荐 · 10 篇Personalization个性化推荐 · 10 篇AI SearchAI 搜索 · 10 篇Agentic智能体搜索 · 10 篇Infra系统与索引 · 10 篇

今日场景社区搜索 (UGC 短文本搜索): 用户在社区平台搜索帖子、问答、评论等 UGC 内容。核心指标是搜索相关性 (nDCG) 和点击率 (CTR)。关注:语义匹配、query 理解、短文本召回、排序模型、LLM 在搜索中的应用。 — 评分 1108 篇,入选 10 篇,分数 3.45 – 4.55

本期目录 · 10 篇
  1. 01SynPlanResearch-R1: Encouraging Tool Exploration for Deep Research with Synthetic Plans
  2. 02DualSpec: Accelerating Deep Research Agents via Dual-Process Action Speculation
  3. 03SPD-RAG: Sub-Agent Per Document Retrieval-Augmented Generation
  4. 04Mind2Web 2: Evaluating Agentic Search with Agent-as-a-Judge
  5. 05ARLArena: A Unified Framework for Stable Agentic Reinforcement Learning
  6. 06Scaling Agentic Capabilities, Not Context: Efficient Reinforcement Finetuning for Large Toolspaces
  7. 07SoK: Agentic Retrieval-Augmented Generation (RAG): Taxonomy, Architectures, Evaluation, and Research Directions
  8. 08In-Context Reinforcement Learning for Tool Use in Large Language Models
  9. 09RAVine: Reality-Aligned Evaluation for Agentic Search
  10. 10A Comprehensive Survey on Reinforcement Learning-based Agentic Search: Foundations, Roles, Optimizations, Evaluations, and Applications
LEAD STORY · 今日必读 · Amazon / UCSD

SynPlanResearch-R1: Encouraging Tool Exploration for Deep Research with Synthetic Plans

针对深度研究 Agent 在使用 RLVR(可验证奖励强化学习)训练时常出现的提前终止和工具使用偏差等探索行为不足问题,提出 SynPlanResearch-R1 框架。核心思路是通过合成包含丰富工具使用轨迹的计划(synthetic plans),引导 Agent 学习多样化的工具探索策略,并将这些轨迹用于初始化 RL 训练。实验表明,该方法显著提升了 Agent 的工具调用多样性和任务完成质量,在多个深度研究基准上相比纯 RLVR 基线取得了明显提升。

相关 4新颖 5实用 4证据 4时效 5
4.55
综合分 / 5
偏好调整 4.55
KEY INSIGHT · 对业务意味着什么该工作揭示了一个关键发现:单纯的强化学习(RLVR)不足以让 Agent 学会充分探索工具空间,合成计划提供的多样化轨迹可以有效缓解探索不足问题。这对构建搜索 Agent 有直接启示——可通过构造包含多种查询策略和信息源组合的合成轨迹来初始化训练,避免 Agent 陷入固定的搜索模式。该方法也为基于 RL 的搜索 Agent 训练提供了一条可行的冷启动路径。
Hansi Zeng, Zoey Li, Yifan Gao, Chenwei Zhang, Xiaoman Pan, Tao Yang, Fengran Mo, Jiacheng... · 2026-03-10 · arXiv
独立页面阅读 ↗

今日其余入选

9 篇 · 按综合排名
02 4.20

DualSpec: Accelerating Deep Research Agents via Dual-Process Action Speculation

Microsoft📖 有深读 · 4 分钟

针对 LLM 深度研究 Agent 在长链信息检索任务中端到端延迟过高的问题,提出双进程动作推测(DualSpec)框架。受人类认知双进程理论启发,设计快速(System 1)和慢速(System 2)两种推测策略:快速策略处理常规动作模式,慢速策略应对需要深度推理的复杂动作。通过自适应选择推测策略并放宽严格动作匹配约束,实现推理与工具执行的有效重叠,显著降低了深度研究 Agent 的端到端响应时间。

INSIGHT深度研究 Agent 的主要瓶颈不在于单步推理能力,而在于多步推理和频繁工具调用累积的延迟。DualSpec 借鉴认知双进程理论,将动作推测分为快慢两个通道,这种设计思路可直接应用于搜索 Agent 的推理加速——对常见查询模式用轻量推测跳过等待,对复杂查询保留完整推理。该方法来自微软研究院,具有较强的工程落地参考价值。

Shuzhang Zhong, Baotong Lu, Qi Chen, Chuanjie Liu, Fan Yang, Meng Li
arXiv·2026-03-10·Relevance 4 · Novelty 4 · Practical 4 · Evidence 4 · Timely 5
独立页面阅读 ↗
03 3.85

SPD-RAG: Sub-Agent Per Document Retrieval-Augmented Generation

针对复杂查询需要从大规模文档语料库中综合分散事实的问题,提出 SPD-RAG 层次化多 Agent 框架。核心创新是沿文档轴分解问题:每个文档由一个专用文档级 Agent 处理,负责深入阅读和事实提取,上层协调 Agent 负责跨文档信息综合与推理。相比标准 RAG 管道的证据覆盖不全和长上下文 LLM 的推理不可靠问题,SPD-RAG 通过分治策略实现了更全面的证据覆盖。

INSIGHTSPD-RAG 提出的「每文档一个子 Agent」思路为搜索系统中的多文档综合问答提供了新的架构范式。在社区搜索场景中,当用户查询需要综合多个帖子/回答的信息时,可以为每个相关文档分配独立的理解 Agent,避免长上下文窗口中的注意力稀释问题。这种分治式架构也天然支持并行处理,有利于降低延迟。

Yagiz Can Akay, Muhammed Yusuf Kartal, Esra Alparslan, Faruk Ortakoyluoglu, Arda Akpinar
arXiv·2026-03-10·Relevance 4 · Novelty 4 · Practical 3 · Evidence 3 · Timely 5
04 4.20

Mind2Web 2: Evaluating Agentic Search with Agent-as-a-Judge

针对 Deep Research 等 Agentic Search 系统缺乏有效评估基准的问题,提出 Mind2Web 2 基准和 Agent-as-a-Judge 评估方法。该基准包含 130 个真实、高质量、长链任务,需要实时网页浏览和大规模信息综合,构建耗费超 1000 小时人工标注。提出的 Agent-as-a-Judge 评估方法解决了传统评估框架无法处理时变答案和开放式输出的问题,为评估 agentic search 系统提供了更真实的衡量标准。

INSIGHTMind2Web 2 填补了 agentic search 系统评估领域的重要空白。当前 Deep Research 类产品(如 OpenAI Deep Research、Gemini Deep Research)缺乏统一评估标准,该基准的 130 个长链任务设计和 Agent-as-a-Judge 方法为搜索 Agent 的质量评估提供了可操作的框架。对搜索系统开发者而言,可参考其任务设计思路构建内部评测集,尤其是其强调的真实性和时变性评估维度。

Boyu Gou, Zanming Huang, Yuting Ning, Yu Gu, Michael Lin
Semantic Scholar·2025-06-26·Relevance 5 · Novelty 4 · Practical 4 · Evidence 3 · Timely 3
05 4.10

ARLArena: A Unified Framework for Stable Agentic Reinforcement Learning

UCLA

针对 Agentic Reinforcement Learning (ARL) 训练高度不稳定、频繁崩溃的问题,提出 ARLArena 统一框架。首先系统性定义了 ARL 的训练稳定性,然后提供一套稳定训练方案(stable training recipe),涵盖梯度裁剪、学习率调度、经验回放缓冲等关键设计选择。框架支持在多种环境和交互时长下系统性分析算法设计决策对训练稳定性的影响,为 ARL 研究提供了标准化的实验平台。

INSIGHTARL 训练不稳定是阻碍搜索 Agent 规模化部署的关键障碍。ARLArena 提供的稳定训练方案(包括具体的超参数配置和训练策略)对于想要用 RL 训练搜索/检索 Agent 的团队极具参考价值。特别是其关于训练崩溃诊断和预防的系统性分析,可以帮助团队在早期发现并避免常见的训练失败模式,降低 RL 训练搜索 Agent 的试错成本。

Xiaoxuan Wang, Han Zhang, Haixin Wang, Yidan Shi, Ruoyan Li, Kaiqiao Han, Chenyi Tong, Haoran Deng, ...
arXiv·2026-02-28·Relevance 4 · Novelty 4 · Practical 4 · Evidence 4 · Timely 4
06 4.10

Scaling Agentic Capabilities, Not Context: Efficient Reinforcement Finetuning for Large Toolspaces

Microsoft

针对小型语言模型(SLM)在大规模工具生态中因上下文饱和和稀疏奖励导致的脆弱性问题,提出 ATLAS 强化微调框架。两大核心贡献:一是将上下文控制和执行结构作为可学习决策,结合迭代工具加载与程序化执行结构;二是通过高效的 RL 训练使 SLM 学会在庞大工具空间中按需获取上下文和执行动作,而非一次性加载所有工具描述。使 SLM 在大工具空间中接近前沿大模型的性能。

INSIGHT该工作来自微软研究院,核心洞察是「扩展 Agent 能力而非上下文」——在工具数量庞大时,SLM 不应贪婪加载所有工具描述,而应学会按需检索和使用工具。这对搜索系统有直接启示:当搜索 Agent 需要对接多种检索、排序、过滤工具时,可通过 RL 训练模型学会动态选择工具组合,而非在 prompt 中罗列所有可用工具。该方法显著降低了部署成本,使 SLM 也能胜任复杂 Agent 任务。

Karan Gupta, Pranav Vajreshwari, Yash Pandya, Raghav Magazine, Akshay Nambi, Ahmed Awadallah
arXiv·2026-03-10·Relevance 4 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
07 3.85

SoK: Agentic Retrieval-Augmented Generation (RAG): Taxonomy, Architectures, Evaluation, and Research Directions

首篇系统性梳理 Agentic RAG 的 SoK 论文,将 Agentic RAG 作为序列决策系统进行研究。建立了完整分类体系,覆盖单 Agent/多 Agent 架构、记忆管理策略、迭代检索策略、工具使用模式等维度,并系统性总结了评估方法论的不一致性和可靠性风险。为目前高度碎片化的 Agentic RAG 研究提供了统一的概念框架和研究路线图。

INSIGHT该 SoK 论文的最大价值在于将 Agentic RAG 纳入序列决策框架来理解,这改变了传统将 RAG 视为静态管道的思路。对于正在构建搜索 Agent 的团队,论文中的分类体系(单 Agent vs 多 Agent、记忆管理模式、检索策略类型)可以直接作为技术选型的参考框架。论文也指出了当前评估方法论的碎片化问题,提醒团队需要建立系统化的 Agent 评测方案。

Saroj Mishra, Suman Niroula, Umesh Yadav, Dilip Thakur, Srijan Gyawali, Shiva Gaire
arXiv·2026-03-10·Relevance 4 · Novelty 3 · Practical 4 · Evidence 3 · Timely 5
08 3.85

In-Context Reinforcement Learning for Tool Use in Large Language Models

NUS

针对 LLM 工具使用能力训练的冷启动问题,提出 In-Context RL 方法。不同于传统的先 SFT 再 RL 的两阶段训练范式,该方法通过在上下文中直接进行强化学习,让 LLM 从交互反馈中学习如何使用外部工具(如 Python 解释器、搜索引擎)。核心思路是利用上下文学习能力将工具使用经验编码为隐式策略,避免了构造高质量 SFT 数据的需求。

INSIGHTIn-Context RL 为工具使用训练提出了一种轻量级替代方案:不需要显式的 SFT 阶段,直接通过上下文内的 RL 来学习工具调用策略。这对搜索 Agent 的实际部署意义重大——当需要让模型学会使用新的搜索 API 或工具时,可以通过少量在线交互快速适配,而非重新收集标注数据并微调。该方法降低了搜索 Agent 对新工具的适配门槛。

Yaoqi Ye, Yiran Zhao, Keyu Duan, Zeyu Zheng, Kenji Kawaguchi, Cihang Xie, Michael Qizhe Shieh
arXiv·2026-03-10·Relevance 4 · Novelty 4 · Practical 3 · Evidence 3 · Timely 5
09 3.55

RAVine: Reality-Aligned Evaluation for Agentic Search

针对现有 agentic search 评估框架与真实用户场景脱节的三大问题(查询不真实、标注噪声大、仅评估最终答案),提出 RAVine 评估框架。核心创新在于三个对齐:一是查询与真实用户搜索场景对齐,二是端到端评估中降低标签噪声的精细化标注方案,三是不仅评估最终答案质量,还评估 Agent 的迭代搜索过程。为 agentic search 系统提供了更贴近现实的评测标准。

INSIGHTRAVine 强调的「过程评估」维度对搜索 Agent 开发至关重要。当前大多数评估仅关注最终答案是否正确,忽略了 Agent 的检索路径是否高效、是否存在冗余搜索。在实际搜索系统中,Agent 的搜索效率直接影响响应延迟和计算成本。该框架可作为搜索 Agent 质量监控的参考,帮助团队同时优化结果质量和搜索效率。

Yilong Xu, Xiang Long, Zhi Zheng, Jin Gao
Semantic Scholar·2025-07-22·Relevance 4 · Novelty 3 · Practical 4 · Evidence 3 · Timely 3
10 3.45

A Comprehensive Survey on Reinforcement Learning-based Agentic Search: Foundations, Roles, Optimizations, Evaluations, and Applications

首篇全面综述基于强化学习的 Agentic Search 的论文,系统性梳理了 RL 在 agentic search 中的基础理论、角色定位、优化方法、评估体系和应用场景。指出传统 RAG 管道是单轮、启发式的,缺乏对检索和推理的自适应控制能力;而基于 RL 的 agentic search 通过计划-检索-反思的多步交互范式,实现了自适应和自我改进的搜索能力。

INSIGHT这篇综述为 RL + 搜索 Agent 的交叉领域提供了完整的知识地图。对搜索系统从业者的核心启示是:RL 在 agentic search 中扮演三个关键角色——学习何时搜索(timing)、学习搜什么(query generation)、学习如何综合结果(synthesis)。论文梳理的优化方法分类(基于奖励模型 vs 基于过程监督 vs 端到端 RL)可以帮助团队根据自身数据和资源条件选择合适的训练策略。

Min Lin, Zongyu Wu, Zhichao Xu, Hui Liu, Xianfeng Tang
Semantic Scholar·2025-10-19·Relevance 5 · Novelty 2 · Practical 3 · Evidence 3 · Timely 3

其他赛道今日

点击切换
Generative
10
生成式推荐 · 篇入选
Personalization
10
个性化推荐 · 篇入选
AI Search
10
AI 搜索 · 篇入选
Infra
10
系统与索引 · 篇入选