微信搜一搜在线检索技术演进复盘

微信搜一搜在线检索技术演进复盘

摘要

2020 年下半年我们(搜一搜工程团队)开发了一个新的内存检索引擎 ZeroSearch，并开始对搜一搜背后的大量垂直搜索系统进行升级，随着升级过程中遇到的各种问题和新的需求，以及半年多来我们自身认识的提高，在线检索引擎在各个方面都取得了长足的进步。在本文中，我会对我们团队做过的一些主要事件进行经验的分享，全文较长，约 2 万 2 千字，内容涵盖评测体系介绍，倒排查找算法优化，线程模型优化，索引压缩原则，wand 检索实践，向量融合方案，以及性能优化方面的工作。

本文与前文(ZeroSearch 在线检索设计)的目的一致，并不是因为觉得自己做得比较好，而是因为网络上关于搜索领域的工程技术文章实在太少了，几乎都是从大的方案架构上进行介绍，然而从目前了解到的信息来看大家其实都大同小异，而稍微细化一点介绍具体实现的资料却几乎没有。