Can QPP Choose the Right Query Variant? Evaluating Query Variant Selection for RAG Pipelines
针对 LLM 改写带来的多 query 变体执行成本,作者把 Query Performance Prediction (QPP) 用作变体选择器:在执行下游检索/生成之前预测每个变体的效果,从而仅运行最优变体。重点研究 intra-topic(同一信息需求内多变体之间)的判别能力,区别于传统 cross-topic QPP。基于 TREC-RAG,使用稀疏与稠密两类检索器、综合评估了 pre-retrieval 与 post-retrieval QPP 指标在 correlation 与 decision 两类任务下的表现。
INSIGHT对社区搜索 query 改写链路有直接价值:当用 LLM 生成多个改写变体时,可在 retriever 之前用轻量 QPP 信号(如 query clarity、SCQ、IDF 分布)做早期路由,避免对每个变体都跑全量召回+排序+RAG。此外文章揭示 intra-topic 判别比 cross-topic 难得多,提示我们短文本社区搜索若想用 QPP 做改写选择,需要专门训练能感知细粒度差异的预测器,而非沿用经典 ad-hoc 检索的 QPP 模型。