R3A: Reinforced Reasoning for Relevance Assessment for RAG in User-Generated Content Platforms
针对 UGC 平台 RAG 系��中相关性评估的两大挑战——用户意图模糊和非对称相关性(相关性由局部答案片段驱动而非全局相似度),提出 R3A 框架。方法将相关性评估分解为意图推理和证据锚定两个阶段:利用高点击文档作为辅助信号推断潜在查询意图,再提取原文证据片段锚定相关性判断,降低噪声敏感性。蒸馏后的 R3A-1.5B 模型在大规模线上 A/B 测试中取得显著提升,兼顾了效果和部署效率。
INSIGHTR3A 的核心创新在于将相关性评估从「端到端打分」重构为「推理链式分解」:先推断用户真实意图,再基于证据片段做判断。这种设计对 UGC 短文本搜索极具实践意义——短文本中用户 query 天然模糊,而答案往往隐藏在帖子的某个段落中。通过强化学习优化推理过程(而非直接优化评分),模型能学到更鲁棒的相关性判断策略。1.5B 蒸馏版本在线上验证了可部署性,是大模型能力落地到搜索场景的良好范例。