抖音影像服务端质量保障体系介绍
如果无法正常显示,请先停止浏览器的去广告插件。
1. 抖音影像服务端
质量保障体系介绍
字节跳动 魏睫明
2. 讲师简介
教育背景
2016年 中国科学技术大学 硕士研究生
工作履历
2016年 校招入职百度,负责广告交易平台的质量保障工作
2018年 入职字节跳动,先后负责商业化广告审核、直播ToB
等业务,目前担任影像-架构质量负责人
魏睫明
互娱研发-质量保障-影像-架构质量
ee.msup.com.cn
3. 提纲
背景
服务端质量保障体系
质量度量
安全生产
多级覆盖率
持续集成
变更治理
总结&规划
ee.msup.com.cn
4. 提纲
背景
服务端质量保障体系
质量度量
安全生产
多级覆盖率
持续集成
变更治理
总结&规划
ee.msup.com.cn
5. 背景
影像产品族是抖音/Tiktok/西瓜等业务的内容生产端,构建了字节系的图片/
视频的内容生产生态,有着剪映、CapCut、轻颜、ULike、醒图、FaceU、
黑罐头等一系列享有很高用户口碑的产品。
针对影像业务多App、多端形态的业务特点带来的挑战,我们构建了具备相
关内容的服务端质量保障体系,具体包括并不限于:
质量度量
安全生产
多级覆盖率
持续集成
变更治理
本次分享,将详细介绍我们服务端的质量保障体系构建。
ee.msup.com.cn
6. 背景
服务端质量保障体系
质量度量
安全生产
多级覆盖率
持续集成
变更治理
总结&规划
ee.msup.com.cn
7. ee.msup.com.cn
8. ee.msup.com.cn
9. 服务端质量保障方案-能力图谱
影像服务端质量保障能力图谱
ee.msup.com.cn
10. 服务端质量保障方案-能力图谱
影像服务端质量保障能力图谱
ee.msup.com.cn
11. ee.msup.com.cn
12. ee.msup.com.cn
13. ee.msup.com.cn
14. 服务端质量保障方案-CI/CD度
量
ee.msup.com.cn
15. 服务端质量保障方案-CI/CD度
量
ee.msup.com.cn
16. ee.msup.com.cn
17. 服务端质量保障体系-安全生产
ee.msup.com.cn
18. 服务端质量保障体系-安全生产
合作机制:
脑暴、确定、宣贯、督导落地;
宣贯问题处理SOP并严格落地,明确研发/QA
POC,缩短流转时长。
ee.msup.com.cn
19. 服务端质量保障体系-多级覆盖率
ee.msup.com.cn
20. 服务端质量保障体系-多级覆盖率
代码行增量覆盖情况
分析
ee.msup.com.cn
归因
补充
用例
沉淀
21. 服务端质量保障体系-多级覆盖率
建设现状
建设现状
目前收益
建设现状
核心服务梳理完备
核心服务覆盖
核心服务增量更新机制
困难&挑战
建设现状
外部依赖
有效拦截线下/线上问题59例
核心服务覆盖率100%
自动化在召回手段中占比较高
接口覆盖
API接口覆盖率85%左
右
RPC接口覆盖60%持续
夯实中
代码行覆盖
ee.msup.com.cn
自动化对全量行覆盖率
63%
要求:手工测试对增量
覆盖率90%以上。低于
这个数据的要做归因
自动化防御能力有限
影响评估机制缺失
蓝军攻击挖掘安全问题27例
线上P2+事故连续5个月维持0
防护更多依赖监控及时召回,比较被动
出现问题,排查依赖第三方业务
影响面无法及时被周知
22. 服务端质量保障体系-持续集成
持续集成能力
持续集成流水线
ee.msup.com.cn
23. 服务端质量保障体系-配置治理
ee.msup.com.cn
24. 背景
服务端质量保障体系
质量度量
安全生产
多级覆盖率
持续集成
变更治理
总结&规划
ee.msup.com.cn
25. 总结&规划
需求变更占比9.4%降低至2.8%
线上问题SOP落地效果良好:
高峰期上线大幅降低:
ee.msup.com.cn
26. 总结&规划
线下拦截情况
线下质量趋势
线上问题召回手段分布
ee.msup.com.cn
线上问题召回手段分布
27. 总结&规划
度量
线上质量度量
自动化
单测智能生成
接口自动化智能断言
规划&探索
效率
精准测试
AIOps智能监控与治理
ee.msup.com.cn
质量
测试账号体系建设
线上全链路压测
28. Thanks
ee.msup.com.cn
Q &A
29. 关注msup公众号
获取更多工程效能实践案例