EG-GRPO: Evidence-Guided Step-level Credit Assignment for Deep Search Agents
搜索智能体常到最后才知道答案对错,难以学到哪次检索有用。EG-GRPO 把首次找到支持证据的步骤记为进展,并在相近知识状态间比较动作。4B 模型在 GAIA 上达到 45.9% 准确率。
INSIGHT只奖励第一次找到的新证据,可以避免重复引用反复得分。比较动作时还要考虑已经掌握的线索,否则接近完成的轨迹会天然占优;论文用逐级放宽分组的办法缓解状态样本稀疏。