CurateEvo: Data-Curation Evolving for Agentic Post-Training
CurateEvo 针对长程智能体后训练中“数据清洗策略固定、无法随失败模式演化”的问题,把数据整理策略表示为可执行代码,并利用 held-out 失败轨迹逐轮重写。每个 epoch 会把同一份原始语料转成 SFT 数据、RL 数据和推理期 memory bank,同时用成本感知目标剪掉冗余训练轮次。在 ACEBench-Agent、BFCL-V4 和 tau2-Bench 上,标注数据与野生数据两种设置分别平均提升 3.2 和 2.7 分。
INSIGHT它把数据 curation 从离线预处理变成闭环控制器:先诊断 agent 经常失败的工具调用、检索或多步决策模式,再决定增强、过滤还是精炼样本。对搜推 Agent 团队,实践价值在于可以把线上失败 query、低质量检索轨迹和人工反馈转成下一轮训练数据,而不是只扩大样本量;成本感知剪枝也能避免长轨迹训练把预算消耗在低价值尾部 turn。