代码变更风险可视化系统建设与实践

如果无法正常显示，请先停止浏览器的去广告插件。

1. 代码变更风险可视化系统建设与实践美团到家事业群

2. 自我介绍刘桂来，2019年加入美团在服务端质量保障体系建设上持续深耕与探索，当前主要负责履约业务质量保障建设工作，在代码变更风险分析、自动化测试、测试效能提升方面有丰富实战经验。

3. 目录（一）软件系统风险与变更（二）代码变更风险可视化（后羿）系统建设（三）代码变更风险可视化（后羿）系统实践（四）未来规划与展望

4. （一）软件系统风险与变更

5. 软件系统风险与变更变更是软件系统进化的推动力，也是孕育风险的温床！典型软件系统外部变更系统内部变更用户流量变更技术人员变更迭代流程变更用户需求变更线上发布变更系统配置变更算法模型变更政策法规变更服务功能变更性能调优变更第三方服务变更系统重构变更系统服务变更第三方组件变更基础硬件变更架构升级变更运营商网络变更机房集群变更基础设施变更云服务容器变更操作系统变更开发语言变更

6. 变更风险引发的典型线上事故更变外部更变置配更变码代更变为人更变码代

7. 到家业务形态加剧变更风险蝴蝶效应多业务接入多参与方配合用户用户终端业务微服务架构用户终端商家商家终端超长业务链超复杂调用链履约平台业务平台骑手骑手终端商家终端履约系统 AA服务分单系统 CC服务 BB服务 Service-F Service-n 服务2 Service-G Service-D Service-C 其他…系统 DD服务交易服务B 交易服务A 活动运营美团内部业务骑手终端交易系统活动系统活动配置配置强依赖询价系统结算系统结算服务A 结算服务B X工程运力系统 Y算法运力接入运力筛选结算系统结算服务A 结算服务B 美团外部业务 Service-N 业务配置中心 Service-H Service-B 降级配置平台灰度配置平台 Service-J Service-K 算法配置平台

8. 变更风险的质量建设做功点消息 http interface rpc interface 事务 … 任务 … 链路方法分页 … … DB库表系统内部变更引发故障占比较高，且与代码变更有直接或间接关系。多线程 … 类 Code 问题一：代码变更风险是否可以被可视化感知？问题二：能否建立代码变更风险的质量保障体系？ Xml配置文件代码特征树举例 Var变量

9. （二）代码变更风险可视化（后羿）系统建设

10. 代码变更风险的质量保障建设思路传统测试模式方术技案变更来源变更了哪些特征？需求文档变更了哪些链路？典型问题一：对代码变更缺少全面可视化能力 …… 代码验证变更与实现一致性 Co de CR 过大：无效、重复变更实现例用试测（一）代码变更感知 • • • • 业务代码分析技术选型支持代码不同存在形态支持java多类型工程模式 …… 过小：漏测、资损典型问题二：影响范围评估更多依赖RD/QA经验不清楚：盲测、低效（二）代码特征刻画 • • • • 支持基本特征（类..) 业务特征刻画（接口..）调用链路分析（跨服务..) …… （三）应用场景生态圈 • • • • 变更影响面评估风险特征预警与拦截配置变更风险预警 ……

11. 代码变更风险的质量保障整体方案到家质量效能部打造的变更风险可视化系统，旨在全方位提升变更风险感知与拦截能力，赋能质效提升业务应用层智能化风险库智能挖掘接口项缺失配置项缺失一致性校准测试覆盖方法级推荐服务级推荐任务项缺失消息项缺失默认值校准影响接口接口级用例迭代级推荐用例/流量智能化推荐测试策略智能化推荐影响接口评估方法链路跨服务链路配置链路专项测试方案功能测试方案代码结构化信息输出代码特征化标注类结构化标注接口结构化标注链路结构化标注消息结构化标准中间件特征 DB类特征多线程特征分页类特征到家BG 加强版codediff 特征刻画层代码结构化标注可视化应用场景输出测试提效测试方案推荐影响面评估长期赋能用例精准推荐配置变更风险诊断技术方案缺失项诊断 OpenApi层算法类特征异常类特征消息类特征资损类特征美团公司代码特征信息输出代码分析层风险特征智能化识别静态字节码分析动态链路分析 Jar包分析跨服务链路分析抽象语法树分析定制化规则分析 rpc服务分析 web服务分析 AI技术（代码克隆、检索）多module类型单module类型基础组件层图数据库 ASM库 ES存储 JavaParser库 MYSQL 测试行业代码分析能力输出已落地建设中长期规划

12. 后羿可视化系统的关键流程入口服务任务消息processer 后羿主站代码可视化（后羿）系统关键处理流程 feature分支源码下载可视化分析入口（人工触发）项目风险评估项目风险评估获取变更文件获取变更方法 master分支异步消息队列解析链路字节码解析部署服务包解析属性特征标注变更方法快照 ES 特征识别方法/接口链路 Graph DB FSD平台代码特征组件化接入自动触发分析获取变更行号可视化分析报告特征标注结果调度任务/特征 Mysql

13. 后羿系统建设技术难点（一）- 代码分析技术 AST技术优势 ASM技术优势 • 主流识别技术框架 • 对变更代码识别效率高 • 技术落地门槛较低 • • • • AST典型问题 ASM典型问题 • Lambda表达式问题 • java泛型问题 • … • Java反射特性无法支持 • 技术门槛较高 • … 丰富的jvm指令集方法调用链识别率高 java内部类识别率高解决lambda、泛型识别 DLA技术优势 • 代码运行时识别 • 支持java反射特性 DLA典型问题 • 获取全部流量难度较大 • 工程落地难点较大 • … 动态链路分析（DLA）抽象语法树（AST） AST单发动机（初期） AST+ASM 双轮驱动（当前）字节码解析（ASM） AST+ASM+DLA 三驾马车（长期）

14. 后羿系统建设技术难点（二）-海量关系数据存储关系型数据库存储（初期）快速迭代、应用范围小亿级海量存储问题（性能问题）方法调用链路拓扑关系查询性能极差图(graph)数据库+MySQL （解决方案） MYSQL：调度任务与特征类型图数据库：拓扑关系与属性

15. 后羿系统建设技术难点（三）-代码风险特征多样性开发每个个性化特征接口后羿开发者通用特征任务 … 基础特征个性特征 … DB 后羿系统限流多线程变量配置类方法分页低效沟通、人力紧张、开发耗时大资损个性特征 redo 需求个性特征补偿类型多代码写法个性化特征规则强业务属性定制化开发特征识别组件加载各业务线QA 组件化开发框架后羿系统

16. （三）代码变更风险可视化（后羿）系统实践

17. 后羿质量保障应用场景生态全景图代码分析能力输出，赋能其他工具平台开放 OpenAPI 重点识别代码风险特征，提供特征风险的提前预警技术方案校准诊断解决技术方案缺失关键变更项质量风险增强版CR 评审代码特征风险预警解决纯文本评审模式的低效与缺少场景级评审的质量风险质量保障应用场景（生态圈）重点解决代码接口声明变更相关质量风险预警兼容性风险诊断解决代码配置变更带来的质量风险变更影响面评估配置变更风险诊断接口级用例推荐重点解决代码变更影响评估基本靠人为经验的质量风险通过用例精准推荐，提升影响接口的测试效率

18. 后羿质量保障应用场景（一）-技术方案缺失项诊断更新及时性差撰写标准化低接口变更缺失关键测试场景漏评估风险测试关键依赖输入配置项变更缺失 RD 需求文档接口任务消息配置 DB表字段变更缺失诊断缺失项确认拦截卡点 DB 识别撰写 ①解析方案wiki 技术方案 wiki 异步消息变更缺失后羿系统定时任务变更缺失 ②代码变更关键项校准后羿报告技术方案缺失诊断报告 QA 测试用例补充

19. 后羿质量保障应用场景（二）-增强版CR 评审新模式聚焦编码规范与架构设计、无法快速跳转到变更方法 QA参与感不足上下游方法内（全文搜索）传统CR四大痛点纯文本逐行CR模式方法跳转无法实时记录业务场景变更风险感知弱 CR节奏被打乱，效率低打破传统纯文本CR模式，建立以变更链路场景驱动CR的新方法，真正解决在CR阶段感知质量风险的能力

20. 后羿质量保障应用场景（三）-变更影响范围评估六大变更影响范围评估能力跨端服务影响跨端调用链路、跨端服务接口跨端消息、跨端定时任务通用风险特征 DB表、DB字段、SQL语句多线程、事务、兼容性分页、异常、递归、限流代码基本属性代码行、分支逻辑类、变量、方法、工程文件单服务影响方法调用链路、接口特征、消息特征、任务特征定制化风险特征算法特征、权限、配置重试、消息补偿、推送消息工程服务类型单module工程、多module工程 RPC服务、http服务、jar包

21. 后羿质量保障应用场景（三）-影响面评估典型例子

22. 后羿质量保障应用场景（四）-配置变更风险诊断线下&线上配置不一致配置默认值编码错误配置变更影响范围不准确配置测试覆盖情况不可见

23. 后羿质量保障应用场景（五）-服务端兼容性风险诊断服务A （旧）线上兼容性风险服务B （旧）入参顺序返回值增加入参减少入参约束入参类型入参增加返回值约束返回值类型影响因子接口声明变更（开发分支）服务A （升级）服务A （旧）服务A （升级）测试顺序发布引发兼容（先提供方，后使用方）并行发布引发兼容（提供方+使用方）服务B （升级）服务B （旧）引发场景服务B （升级）兼容性测试 + 上线顺序评估反射序列化线上入参/返回值VO类确认风险间接引用 VO类1 间接引用 VO类N 成员变量 VO类1 间接引用 VO类2 间接引用 VO类N+1 成员变量 VO类2 参数 VO类返回值 VO类递归反射序列化入参/返回VO类接口声明变更差异性diff 接口兼容性预警

24. 后羿质量保障应用场景（六）-接口级自动化用例推荐用例推荐整体解决方案代码变更自动化用例量识别变更方法分析影响链路分析影响接口全量用例回归是否效率低？重大技术重构回归哪些用例？变更接口+ 变更方法 RD自测保障用例覆盖全吗？基础组件升级选哪些用例？自动化用例典型四大痛点获取自动化用例测试计划自动化用例推荐结果 input：iface + method return：命中查询条件的流量TraceID列表 input：流量TraceID列表 return：命中查询条件的自动化用例测试计划智能代码覆盖率平台基于历史流量覆盖，持续构建索引 <iface and method, TraceIDs> 一体化自动化平台基于历史运行的自动化用例流量，持续构建<流量TraceID，用例>

25. 后羿质量保障应用场景（七）-代码质量风险特征预警这次改动影响了资损？没感知到呢这次改动涉及新增接口调用，忘了验证返回异常场景了! 这次改动涉及到分页功能了吗？忘记验证了这次改动还涉及重试场景验证？没感知到啊代码质量风险特征解决方案业务A风险特征业务B风险特征识别策略模型识别策略模型通用风险特征识别策略模型业务C风险特征业务D风险特征识别策略模型识别策略模型后羿系统core分析服务限流特征算法特征消息补偿特征消息推送集群化特征 rpc调用特征金额单位特征监控特征权限认证特征资损特征随机数特征限额控制特征配置特征数据库SQL特征主从延迟特征精度转换特征线程安全特征异常特征分页特征多线程认证事务特征 DB表/字段配置平台资金安全平台消息管理平台 mock工具资金风险防控平台异常测试平台限流平台工具赋能定制化特征插件化组件（SDK）重试特征算法平台异常特征测试策略推荐分页特征测试策略推荐配置特征测试策略推荐资损特征测试策略推荐事务特征测试策略推荐 …… 策略赋能

26. 后羿质量保障应用场景（八）-开放OpenApi赋能获取分析方法批量获取分析方法检索方法详情获取分支代码方法信息类分支信息类获取有报告分支后羿系统四大开放API 能力项获取报告代码变更获取报告方法变更获取分析报告列表报告信息类链路拓扑类检索方法下游链路检索链路树形结构检索链路上下方法当前已开放支持的工具平台接口管理平台智能代码覆盖率全息系统自主工程交付系统异常测试平台一体化自动化平台

27. （四）未来规划与展望

28. 未来规划与展望代码分析技术增强 01 02 动态链路分析技术（DLA）提升分析准确性风险特征识别技术基于LLM的风险特征分析及测试策略推荐未来规划与展望开源 & 共享 & 赋能开源系统代码分析能力、赋能测试领域 04 03 03 丰富应用场景生态圈探索更多质量保证落地应用场景生态

29. Q&A

30. 招聘：质效建设&业务测试岗位邮箱：liuguilai@meituan.com ——加入我们，一起用技术驱动质量与效能变革更多技术干货欢迎关注“美团技术团队”