EdgeLM: Edge Demonstrations for Language Models' Table Understanding
EdgeLM指出,示例检索若只按查询相似度选上下文,容易重复模型已有判断,难以暴露真正的决策边界。它同时检索两类边界证据:近邻但标签不同的数据边界,以及相似却被部署模型误判的模型边界,无需重训或任务特化。在5类数据整理任务、15个数据集和5种开源/闭源大模型上,各设置均达到最佳或接近最佳表现。
INSIGHT短文本搜索的难例评测也应主动检索“可区分的反例”,而不只是最相似样本。可以在离线日志中维护相似但相关性标签相反、以及线上模型误判的两类样本池,用于重排训练、标注审核和Bad Case解释;两个边界信号互补,改造成本低。