搜索数据建设系列之数据架构重构

搜索数据建设系列之数据架构重构

摘要

百度搜索业务通过宽表模型设计、计算引擎优化和图灵3.0开发模式，解决了传统数仓在快速迭代场景下的性能与成本问题。采用Parquet列式存储和Spark引擎提升查询效率，结合Iceberg实现高效回溯。新模式下数据集建设让业务自助分析占比提升至90%，查询性能达秒级，人力成本降低66%。未来将探索AI大模型与通用数据流技术，持续优化数据架构。