Self-Conditioned Positional HNSW for Overlap-Aware Retrieval in Chunked-Document RAG Systems
RAG 把文档切成有重叠的 chunk 后用 HNSW 做近邻检索,重叠虽能改善边界覆盖,却带来一个常见故障:top-k 经常返回相邻 chunk,重复证据、挤占 prompt 预算。SCP-HNSW 给 chunk embedding 追加一个低维位置编码,用两遍 query 流程估计并施加 query 相关的文档位置先验,再用一个可审计的 minimum-index-gap 选择器构造最终上下文。该方法不改动 HNSW 的图构建与遍历,属于轻量级旁路改造。论文还附带了 770 条评论的文本证据审计和 70 例 OCR 审计。
INSIGHT这是针对 chunk 重叠导致检索冗余的轻量补丁,值得社区搜索的 RAG/长文召回链路借鉴。它不动 HNSW 索引本身,只在 embedding 上拼位置码、在选择阶段加最小间隔约束,工程改造成本极低。但论文的实验偏弱——没有给召回率、冗余下降比例或时延数字,只有评论质量审计(574/770 评分 3/5、OCR 清晰截图通过率 95% 降到手写模糊 45%),证据强度不足,落地前需自己补检索指标的 A/B。