今日场景今天检索赛道有 10 篇,5 篇有深度解读。帕绍大学的实验给了一个直接的结论:要做重排序,就按重排序来微调,新出的决策模型并不更好。LightRetriever 把查询编码从跑一遍大模型变成查表,适合查询量大的线上检索。另外几篇讲多模态向量的模态鸿沟和推理增强,以及扫描版 PDF 的检索流程。做搜索和检索增强生成的团队可以先看前两篇。 — 评分 54 篇,入选 10 篇,分数 3.75 – 4.65

本期目录 · 10 篇
  1. 01System One models Are Not Better Rerankers
  2. 02LightRetriever: A LLM-based Text Retrieval Architecture with Extremely Faster Query Inference
  3. 03Closing the Modality Gap via Simplex-Constrained Representations
  4. 04Beyond Post-Hoc Rewards: Privileged Reasoning Exploration for Multimodal Embeddings
  5. 0556 scanned pages to a cited answer in 5 minutes: RAG pipeline for the documents search cannot read
  6. 06Yalda-Embedding: Open Development of a Competitive Persian Retrieval Model
  7. 07Scalable PDF Retrieval with Cohere Embed 5 and Qdrant Asymmetric Quantization
  8. 08Mitigating Saliency Collapse: Robust Saliency-Aware Long-Text Image-Text Alignment
  9. 09UAE GovTrust Scope Filtering Gains and Routing Failures in Bilingual Public Service Retrieval
  10. 10Cycle-of-Thought: Self-Evaluative Iterative Reasoning for Table Visual Question Answering in Document Images
LEAD STORY · 今日必读

System One models Are Not Better Rerankers

拿新出的决策模型给检索结果重新排序,并不比专门微调的重排序模型好,这是帕绍大学这篇论文的结论。决策模型也叫 System One 模型,对一个问题直接给出校准过的“是”的概率,不生成文字,刚发布几周就被拿去做重排序。论文用同一个底座比较两种微调:决策微调用各类是非题训练模型给出准确的概率,重排序微调则只用 MS MARCO 的查询和段落训练模型判断段落是否相关。在六个不同大小的 Qwen 底座和十个 TREC DL、BEIR 数据集上,中小规模时重排序微调在每个底座上都赢,9B 及以下 nDCG@10 高出 5 到 29 分,到 27B 两者打平。这个规模以下,决策微调并不比直接问未微调的原模型更好。作者的结论很直白:需要重排序模型,就按重排序来微调。

相关 5新颖 4实用 5证据 4时效 5
4.65
综合分 / 5
偏好调整 4.70
Michael Dinzinger, Kanishka Ghosh Dastidar, Michael Granitzer · 2026-10-23 · arXiv

今日其余入选

9 篇 · 按综合排名
02 4.65

LightRetriever: A LLM-based Text Retrieval Architecture with Extremely Faster Query Inference

已录用 ICLR 2026📖 深度解读 · 9 分钟 →

用大模型做文本检索,文档可以提前离线编码,查询却要实时编码,每来一个查询都要跑一遍大模型,吞吐低、部署贵。LightRetriever 让两边不再对称:文档仍用完整的大模型编码,查询端只剩查表。训练时把一段共享提示词接上单个词送进大模型,得到这个词的向量,查询向量取各个词向量的平均。词表里每个词的向量都能提前算好存成一张表,上线后查询只需查表再求平均。和在 A800 GPU 上跑完整大模型相比,查询编码快 1000 倍以上,端到端检索吞吐提高 10 倍以上,在多个检索基准上,平均保留完整大模型检索器约 95% 的检索指标。

Guangyuan Ma, Yongliang Ma, Xuanrui Gou, Zhenpeng Su, Ming Zhou, Songlin Hu
ICLR 2026·2026-01-26·Relevance 5 · Novelty 4 · Practical 5 · Evidence 4 · Timely 5
03 4.40

Closing the Modality Gap via Simplex-Constrained Representations

📖 深度解读 · 11 分钟 →

CLIP 这类图文或音文对比学习模型,两种模态的向量虽然对齐训练过,却常常整体错开、各占一片区域,这叫模态鸿沟。这篇论文不改主干模型,只改向量所在的空间:把通常的单位球面换成概率单纯形,也就是每一维都不能为负、所有维加起来等于 1。实现上只在输出端接一个很轻的 softmax 适配器,相似度改用两个分布的总变差距离来算。两种模态被迫落在同一套坐标里,彼此的偏移基本消失。在五个跨模态检索基准上,两种模态中心点之间的距离缩小 97% 到 99%,检索效果持平或更好。

Shubham Gupta, Siva Reddy, Perouz Taslakian, Valentina Zantedeschi, Cem Subakan
arXiv·2026-10-23·Relevance 5 · Novelty 4 · Practical 4 · Evidence 4 · Timely 5
04 4.30

Beyond Post-Hoc Rewards: Privileged Reasoning Exploration for Multimodal Embeddings

📖 深度解读 · 12 分钟 →

一些多模态向量模型会先让模型针对输入写一段推理,再把推理一起编码,得到信息更多的向量。但训练数据只告诉模型哪两样东西相关,从不告诉它该写什么推理,只看输入去摸索,很难找到对检索真正有用的推理。PILOT 让同一个多模态大模型扮演两个角色:一个只看输入写推理,另一个在训练时还能看到配对的正确答案,因而更容易写出有用的推理。后者写出的推理会挑一部分教给前者:一看用这段推理生成的向量检索效果好不好,二看前者只凭输入写出这段推理的概率高不高,两者都高的权重才大。上线时只用前者。在含 78 项任务的 MMEB-V2 上,2B 和 7B 模型总分分别提高 3.2 和 3.3 分,视觉文档检索提升最大。

Tianyu Yang, Yijun Tian, Lars Benedikt Kaesberg, Jan Philip Wahle, Bela Gipp, Terry Ruas 等 7 人
arXiv·2026-10-23·Relevance 5 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
05 4.30

56 scanned pages to a cited answer in 5 minutes: RAG pipeline for the documents search cannot read

📖 深度解读 · 9 分钟 →

企业很多知识躺在扫描版 PDF 里,传统搜索读不出来。Elastic 这篇教程搭了一条检索增强生成流程:上传一份 56 页的扫描版植物指南,用自然语言提问,几分钟内得到带页码出处的回答。关键是 jina-ocr-v1,它一次读一整页图片,直接输出保留阅读顺序的 Markdown,表格保留成表格,手写字也能转出来,页眉页脚会被去掉。解析结果写进索引时自动切块、算向量,再用关键词和语义混合检索,最后交给大模型生成带引用的回答。整条流程跑在一个平台里,不用自己部署模型和 GPU。

技术博客·2026-10-22·Relevance 5 · Novelty 3 · Practical 5 · Evidence 3 · Timely 5
06 4.10

Yalda-Embedding: Open Development of a Competitive Persian Retrieval Model

波斯语缺少专门的训练数据和小巧的向量模型,稠密检索一直做不好。这篇论文从 Qwen3-Embedding-0.6B 出发,用一百多万对波斯语查询和文档继续训练,得到约 6 亿参数的 Yalda Embedding,训练和数据都公开。在 FaMTEB 的八个波斯语检索任务上,它在同规模模型里平均分最高,每个任务都超过原模型和另一个同规模的 F2LLM-v2,也已接近大好几倍的 Qwen3-Embedding-4B。消融显示,光做对比学习微调提升有限,还会让个别任务变差,把每批负样本从 63 个加到 511 个、加上梯度裁剪和学习率预热,再让它学习大得多的 F2LLM-v2-8B 对同一批文档的相对排序,分数才推上去。

Yalda Taheri, Mohammad Hassan Heydari, Armon Rasooli
arXiv·2026-10-23·Relevance 4 · Novelty 3 · Practical 5 · Evidence 4 · Timely 5
07 4.05

Scalable PDF Retrieval with Cohere Embed 5 and Qdrant Asymmetric Quantization

PDF 里很多答案藏在图表里,OCR 转文字会丢掉版面信息,常用的做法是给每页存约一千个小块向量,存储很重。Qdrant 实测发现,Cohere 新发布的 Embed 5 Pro 一页只用一个向量,在五个公开英文文档集上的效果已经超过几种多向量模型。再进一步压缩:只保留前 512 维,每维只存正负号,查询向量则保留较高精度,粗排后再用完整向量给靠前的结果重排。页面向量压到最小时,排序质量几乎没掉,每页内存只占 64 字节,重排后的 nDCG@10 仍有完整浮点向量的 99.2%。

技术博客·2026-10-23·Relevance 5 · Novelty 3 · Practical 4 · Evidence 3 · Timely 5
08 4.00

Mitigating Saliency Collapse: Robust Saliency-Aware Long-Text Image-Text Alignment

用长段文字检索图片时,模型往往只盯着描述显眼物体的那几句,周围交代环境和细节的文字几乎不用。这篇论文把这个现象叫作显著性坍缩:把查询里写显眼物体的句子删掉一部分,检索准确率掉得比随机删同样多的字快得多。他们提出 RoSA,用物体级的视觉显著性估计切分图片,用大模型切分文字,把每对图文拆成显眼部分和背景部分两份。训练时额外要求两份各自对齐,让模型两种信息都学。长文本检索明显提升,显眼内容被删时也更稳,这些附加目标还能直接加到现有方法上。

Qiuyu Kong, Zanxi Ruan, Marco Cristani, Yiming Wang
arXiv·2026-10-23·Relevance 4 · Novelty 4 · Practical 4 · Evidence 3 · Timely 5
09 3.75

UAE GovTrust Scope Filtering Gains and Routing Failures in Bilingual Public Service Retrieval

办政务事项的问题里常常出现好几个地点,但真正决定该办哪项服务的只有一个,比如住在甲地却要给乙地的公司办执照。这篇论文为此做了一个阿联酋中英双语的检索诊断集,比较了十二种方法。先判断哪个地点决定要办的服务,只保留这个地点的服务条目,再融合关键词和向量两路排序,效果最好:在可回答的双语问题里,首条结果命中率约 96%,不过滤只有 65%。但负责判断要办什么、在哪办的路由模块很脆弱,问题换个说法、加句无关信息或带个否定,168 个变体里它只判对 2 个。

Aleksandar Mihajlovic
arXiv·2026-10-23·Relevance 4 · Novelty 3 · Practical 4 · Evidence 3 · Timely 5
10 3.75

Cycle-of-Thought: Self-Evaluative Iterative Reasoning for Table Visual Question Answering in Document Images

视觉语言模型看文档图片里的表格答题时,常对错行列、算错数,而微调要大量专家标注,门槛很高。这篇论文提出 Self-RefineVQA,不训练、不加标注,让同一个模型轮流当三个角色:先作答,再像审稿人一样检查答案和表格是否对得上,最后按检查意见改答案,如此循环几轮。小模型受益最大,Qwen2.5-VL 3B 在 WikiTableQuestions 上最多提升 13%,能和大得多的模型相比。代价是推理成本随轮数线性增加,但省掉了人工标注。

Somraj Gautam, Gaurav Harit
arXiv·2026-10-23·Relevance 4 · Novelty 3 · Practical 4 · Evidence 3 · Timely 5

其他赛道今日

点击切换

开源雷达

GitHub / HuggingFace 热门 · 8 个项目
kuraneko1/dsh-mobile-maxxingDeepSeek Harness の Web UI をスマホで使い倒す統合プラグイン: PWA・通知・モバイルUX・CJK表示JavaScript · ★ 43 · 2026-10-23 · GitHubarcmira/arcmiraYouTube transcript search with timestamps, speaker appearances, mentions, sponsors and recommendations. Official Arcmira TypeScript SDK and CLI.TypeScript · ★ 28 · 2026-10-12 · GitHubBlackwellboy/DeepSeek-V4.1-Flash-1017-BLACKFOLD-TP2Uncensored DeepSeek-V4.1-Flash-1017 on 2x DGX Spark: refusals 94 to 6, same answers as DeepSeek's API, 2,008 tok/s prefill at 128K, 113 tok/s code decode. TensorFold native, 3 engine patches, 2 RoCE rails.Python · ★ 22 · 2026-10-20 · GitHubinternlm/Intern-Decision-4Bpipeline: image-text-to-text; tags: transformers, safetensors, qwen3_5, image-text-to-text, decision-making, multimodal, structured-prediction, decision-modelmodel · ★ 91 · 2026-09-26 · HuggingFaceinternlm/Intern-Decision-0.8Bpipeline: image-text-to-text; tags: transformers, safetensors, qwen3_5, image-text-to-text, decision-making, multimodal, structured-prediction, conversationalmodel · ★ 37 · 2026-09-26 · HuggingFaceinternlm/Intern-Decision-2Bpipeline: image-text-to-text; tags: transformers, safetensors, qwen3_5, image-text-to-text, decision-making, multimodal, structured-prediction, conversationalmodel · ★ 19 · 2026-09-26 · HuggingFaceAlibaba-DAMO-Academy/RynnUnify-Agentic-Reasonerpipeline: image-text-to-text; tags: transformers, safetensors, qwen3_vl, image-text-to-text, rynnunify, embodied-ai, visual-reasoning, reinforcement-learningmodel · ★ 3 · 2026-10-22 · HuggingFaceAlibaba-DAMO-Academy/Rynn-VPRynn-VP: Long-Horizon Visual Planning Benchmark Rynn-VP evaluates visual plans for everyday manipulation in real indoor scenes. Given a natural-language task and an initial image, a system produces a candidate video or an ordered sequence of step images. Evaluation examines the a; tags: language:en, license:cc-by-nc-4.0, size_categories:n<1K, region:us, visual-planning, embodied-ai, video-generation, multimodaldataset · ★ 1 · 2026-10-25 · HuggingFace