DeepResearch-9K: A Challenging Benchmark Dataset of Deep-Research Agent
论文发布 DeepResearch-9K:包含 9000 个可验证问题、三级难度和 Tongyi-DeepResearch-30B-A3B 生成的完整检索轨迹,并开源支持多轮联网、GRPO/PPO 与多种奖励的 DeepResearch-R1。教师模型总准确率仅 55.84%,最高难度降至 23.73%,显示长链搜索仍有巨大缺口。
INSIGHT数据集把难度直接绑定到工具调用深度:最高级任务至少需要 15 次独立搜索,并通过实体遮蔽与跨文档约束阻断关键词捷径。搜索团队可用同样方法构造复杂 UGC 调研集,把最终正确率与搜索次数、轨迹质量同时纳入离线评估,再比较 Zero-RL 和 SFT+RL 的收益。