When Users Don't Ask: Benchmarking Context-Driven Memory Retrieval in Conversational Agents
LoCoMo-Conv 将记忆问答改写成对话、隐式、反事实和组合四类请求,分别评估五种记忆系统的检索与回答。AnchorMem 的隐式查询 recall@10 为 0.368,多角度改写加 RRF 后升至 0.524;组合查询从 0.279 升至 0.432。摘要型记忆并未稳定受益,说明显式问答成绩难以代表真实对话。
INSIGHT社区用户常通过上下文表达需求,可将“帮我找之前提到的做法”等隐式请求加入搜索 Agent 的离线集,同时检查多步证据召回和回答质量。原始帖子记忆适合尝试多角度改写,压缩后的记忆需要单独验证;不要把召回改善直接记作回答质量或 CTR 收益,还要检查反事实请求是否得到纠正。