PolicyBank: Evolving Policy Understanding for LLM Agents
论文提出 PolicyBank,一种让 LLM Agent 通过交互和纠正反馈来迭代进化策略理解的记忆机制。针对自然语言策略规范中不可避免的歧义和逻辑缺口问题,PolicyBank 维护结构化的工具级策略洞察并持续优化,相比现有记忆机制在策略缺口场景中从近乎零成功率提升到缩小 82% 的人类与 AI 差距。
INSIGHTPolicyBank 将策略视为可演化实体而非固定规则,通过部署前测试的纠正反馈来消除规范歧义。这一思路对搜索 Agent 极具启发:搜索系统的排序策略和内容过滤规则同样存在自然语言规范的模糊性,可借鉴 PolicyBank 的迭代进化方法让 Agent 逐步学习正确的检索和排序策略。