PeopleSearchBench: A Multi-Dimensional Benchmark for Evaluating AI-Powered People Search Platforms
针对 AI 驱动的人物搜索平台缺乏统一评测基准的问题,提出 PeopleSearchBench 开源基准。在 119 个真实查询上对比 4 个主流人物搜索平台,覆盖企业招聘、B2B 销售、专家搜索、KOL 发现四大场景。核心贡献是 Criteria-Grounded Verification 方法——一种基于标准的事实相关性评估流水线,将搜索结果的评判建立在可验证的事实标准之上,而非主观判断。
INSIGHTCriteria-Grounded Verification 的评测理念对搜索系统评估有重要参考价值:将搜索结果的相关性评判分解为可验证的事实标准,而非依赖单一的 nDCG/MRR 指标。对于 UGC 社区搜索,可以借鉴这种方法设计面向多维度(相关性、新鲜度、内容质量)的评测框架。此外,该基准覆盖的 4 类搜索场景和 119 个查询模板本身也是构建搜索评测数据集的参考模板。