360搜索质量保证体系建设

1.

2.

3. 韩金成来自360搜索测试部负责360搜索前端、引擎的测试工作，期间建立测试规范、复杂项目测试设计、提效工具开发、平台化建设、自动化框架搭建、CICD等

4. O1 360搜索质量保证体系 O2 工具平台助力提质增效 O3 未来规划和探索

5. 360搜索质量保证体系

6. 面临质量保证的挑战特点 01 02 挑战业务特点稳定性要求高单日pv高、稳定性要求高、 query广泛丰富、入口多、时效性高用户体验、容忍度低、高可用服务架构特点分布式、集群化、层次多，机器多，服务多，链路长数据特点 03 百亿网页、数据分散、数据量大、处理过程多，多样性团队特点 04 测试开发比低，项目需求多，人员并行化严重准确评估影响面依赖影响、改动关联服务影响，兼容性要求高测试覆盖率需求多样性、功能点多、功能关联性强. 工作效率低代码、自动化程度、自动化覆盖

7. 项目全生命周期质量保障意义质量保障应该贯穿整个项目的生命周期，从需求阶段开始到研发、测试、发布、线上运行，每个阶段对应不同的质量保证手段，才能在使问题更早的暴露出来，越早发现，带来的成本越低，反之，成本越高测试质量产品质量研发质量测试质量易用性交互体验适用性代码质量编程风格自测程度功能覆盖性能指标兼容性运维发布质量线上质量发布流程功能回归异常处理健康监控效果监控稳定性监控

8. 360搜索全链路质量保证体系

9. 工具平台助力提质增效

10. 提效--配置化流水线协作 • • 控制变更，安全稳定压倒一切开发、运维部门间缺乏沟通与协作流程 • • • • 部署时不经过制品库部署后没有全面的健康检查测试环境不全，缺少某些环境没经过测试和准生产环境，直接部署生产环境工具 • • • • 没有统一的制品库环境创建非常慢手工登录SSH配置环境没有统一的应用部署工具规范 • • • • 没有统一打包规范不同环境的部署方法不一致不同环境的部署包不一致不同环境的创建方法不一致

11. 提效--配置化流水线

12. 配置化流水线机器与集群管理运行流程配置化插件化扩展方式内置丰富自动化组件利用服务组管理上下游部署

13. 配置化流水线

14. 配置化流水线管理 1. 2. 3. 4. 5. 6. 7. 代码管理版本控制制品管理环境治理自动化管理报告管理机器管理效率 70+服务 5000+运行 1. 2. 3. 4. 5. 6. 开发自测效率问题前置交付能力服务接入效率测试效率降低人力成本

15. 增量代码扫描

16. 增量代码扫描

17. 增量代码扫描

18. 提升测试覆盖率—diff测试性能 diff 应用范围：服务端修改、升级、重构等 B 图片diff 适用范围：针对前端样式，图片、排版是否有变化的评估 Json diff 应用范围：服务迁移、服务升级、架构升级、代码变动影响范围评估适用场景：接口返回json结果

19. 稳定性保证—线上监控体系掌握服务运行状态做到心中有数及时止损发现问题第一时间处理，避免造成更大损失关联上下游直接定位问题根源，减少时间浪费责任到人减少不相干报警，避免对报警疲劳

20. 稳定性保证—容量规划为什么要做容量规划？？容量是多少？余量还有多少？？什么情况下需要扩容，需要扩容多少？？整体的瓶颈在哪里？那些服务存在隐患？？何时需要降级？降级预案是什么 45 25 50 60 75 80 95 98

21. 稳定性保证—容量规划

22. 稳定性保证—容量规划摸清线上容量情况，对后续的产品策略提供了数据支撑发现很多因为上下游关联影响的性能问题、机器资源问题、服务代码问题、环境问题等推动资源扩容、代码优化、资源合理分配，提高了整理流量空间推进服务优化、建立分级降级方案、熔断机制等

23. 未来规划和探索

24. 稳定性基于算法的搜索质量评估基于代码插桩的精准测试搜索引擎问题追踪系统引擎调用链路与函数调用热图与耗时diff

25. 360技术 THANKS 360质量效能