SPADE: Self-Play in Adaptive Synthetic Executable Environments
SPADE 让同一个 LLM 同时担任环境设计者和推理 Agent:前者生成带 reset()/step()、状态转移、奖励与验证代码的长程环境,后者在其中学习工具调用。环境设计器依据“有无特权提示”的 regret 自适应制造接近能力边界的任务;在 30B 模型上,八个留出基准平均提升 5.3,BFCL-v4 多轮工具调用提升 5.7,ACEBench-Agent 提升 13.9。
INSIGHT这提供了搜索 Agent 自动生成难例的可行范式:用真实 UGC 查询、检索轨迹和验证器生成可执行多跳任务,再让环境难度随模型能力升级。落地时要保留确定性 verifier 与任务预算,避免把“会生成更难题”误当成线上 nDCG 或 CTR 的直接收益。