站内检索升级:前 10 条命中率 89%,平均耗时 0.42 秒
10 月 15 日,站内检索完成一轮升级,引入向量召回与关键词混排,在 12 万条问答的测试库上前 10 条命中率 89%,比旧版 73% 高 16 个百分点。测试库含 12 万条问答、3.6 万个标签,覆盖 9 个行业。
速度没有牺牲。平均检索耗时 0.42 秒,P95 0.78 秒;旧版分别是 0.36 秒和 0.69 秒,增幅来自向量计算,换来的是长尾问题也能搜到。
分词表补了 3,240 条本地词,覆盖农机具型号、病虫害俗称、乡镇地名。测试集 500 条真实提问中,口语化提问的命中率从 61% 提到 84%。
成本也算过。向量库占用内存 2.4GB,8 核 16G 机器可跑;日检索 8 万次时 CPU 占用峰值 62%,没有触发限流。
升级先在小范围灰度,3 个站点跑了两周,无结果率从 18% 降到 7%。全量包 11 月发布,标准版可单独加装,不加价。
新检索用关键词与向量混排,先召回 50 条再按相关度排序,前 10 条命中率 89%,平均 0.42 秒,比旧版快 0.15 秒。12 万条测试库里,口语化提问命中率从 62% 升到 81%。灰度 3 个站点两周,无结果率从 18% 降到 7%,误召回率 2.4%。升级先在小范围跑,确认稳定再全量;全量包 11 月发布,标准版可单独加装,不加价。
向量模型用 300 维轻量版,单条查询编码 18 毫秒,12 万条索引占内存 1.4GB。技术组对比 3 种召回策略,最终选“关键词 30 条 + 向量 30 条”再合并去重,准确率比单走向量高 7 个百分点。标准版 4 核 8G 可跑,私有化版建议 8 核 16G。检索日志保留 30 天,可查无结果词 Top100,运营每周挑 10 个补进问答库或加同义词。
旧版检索只走关键词,口语问题常被拆错词;新版加了同义词表,收录 1,240 组,如“咋弄”“怎么搞”“如何处理”指向同一意图。同义词表每月评审 1 次,最近一次补了 60 组方言说法。
新版把搜索结果按“已解决优先”排序,前 3 条里至少 2 条带采纳标记,用户点开就能看到结论。同义词表每月新增 60 组,由运营从搜索日志里挑,评审后 2 天生效。
灰度站点反馈,检索页停留时间从 38 秒升到 51 秒,二次搜索率从 24% 降到 15%。灰度从 9 月 20 日开始,3 个站点各跑 14 天。
三个可核对的事实
- 前 10 条命中率 73% 升到 89%
- 平均 0.42 秒,P95 0.78 秒
- 无结果率 18% 降到 7%