1. 打造“质”地有声的产品质量与高效团队 分享人：郑红波 2023年4月 星图金融

2.

3. Contents 目录 01 测试活动管理框架及治理架构 02 端到端测试质量交付与实践 03 团队能力建设与专项赋能

4. 引篇：一份测试调研分析报告 问题表象 产品需求不清晰、变更频繁 关联需求遗漏 开发转测质量差 问题根源及归类 测试过程管控－未明确质量标 准 缺陷修复周期长、缺陷reopen率高 组织结构治理－未明确定义角 跨产品线边界范围谁来测试，领导拍 色、职责 自动化有效测试覆盖率低 UAT测试流于形式 测试团队业务知识储备弱 测试需求分析－未明确产品需 求、阶段交付物 测试活动过程管理－未明确测 试策略、精益改进 测试数据准备成本高 系统调用链复杂，问题定位成本高 测试过程管控－未明确组织流 同类别生产问题、用户体验问题反复出现 程、过程步骤 跨体系、中心部门不配合 工作移交没有明确标准，新人接手迷茫 绩效考核机制不合理，缺少激励 引发的思考 组织测试管理框架设计 需求质量与稳定性管理 测试活动全流程治理模型 测试活动实施过程管控 自动化测试实施策略 交付质量度量评估 专业测试团队建设 …… 测试过程管控－欠缺测试活动 实施风险应对技术、工具

5. 1.1 组织测试管理框架-管理思路 强化产品可运营化的实施与交付，完善产品质量、效能提升为导向的测试活动生命周期管理 需求段 需求 识别 需求 分析 1、解决需求质量及稳定性 精益段 研发段 代码 系统 自动化 非功能 测试 开发 测试 测试 测试 工 具 2、解决并行工程，项目高质交付 质量 数据 复盘 下钻 分析 改进 能力 建设 3、过程持续改进精益化 预期产品需求的匹配契约 测试里程碑计划的交付契约 测试管理过程的精益改进 需求变更率 项目提测质量与测试交付质量管控 测试交付质量复盘 需求可测试性维度度量 测试管理规范应用与模型度量应用 全研发过程数据下钻挖掘与分析 风险平衡与资源聚焦….. 测试技术升级、专业能力建设….. 过程质量的持续改进 需求质量 可测试性分析 测试策略制定 计划、方案、资源 测试执行 数据挖掘与分析 过程管控，产品交付 质量、过程、效能改进

6. 1.2 组织测试管理框架-治理架构 用户层 前台层 管理决策层 需求团队 测试活动管理规范 研发过程管理规范 需求管理规范 生产问题管理规范 绩效评价方案 业务运营团队 研发团队 职能管理团队 外部协作团队 测试工具链 缺陷分析指南 质量回溯操作手册 测试环境管理规范 组织级质量管理 需求变更评估 需求有效识别 中台层 （端到端） 过程改进收益 后台层 （服务与支撑） 问题分析与改进 测试案例设计及评审 提测质量 数据下钻 测试质量评价 需求可测性分析 系统集成测试 缺陷管理 自动化测试 测试质量收益 度量模型 测试环境管理 协同 绩效评价与考核 质量飞检审计 投产成功率 系统专项治理 指导 项目级质量管理 非功能测试 自动化测试收益 自动化率 项目级缺陷分析 测试质量自检 质量回溯 测试活动管理 测试过程复盘 转测成功率 研发管理协同 组织赋能与卓越

7. 1.3 搭建本土化组织测试管理体系 本土化特征的测试管理体系 组织架 构配套 职能的 设计与 支撑 需求可 测试性 分析与 测试策 略分析 测试活 动执行 与专项 过程数 据挖掘 分析 道+法+术+器+ 测试活 动管理 实施与 组织改 进 势 企业内、外环境因素 测试管 理专业 人员的 培养与 选拔 道 • 意识、观念 法 • 组织结构 • 规章制度 • 整体框架 术 • 流程/规范 • 实践方法论 器 • 工具、模板 • 本地化培训 • 管理系统 • 文化宣传、价值观导入 • 员工培训、研讨等 • 组织设计与优化 • 项目分类分级 • 制度设计与完善 • 岗位职责设计…… • 测试活动管理规范标准化 • 最佳实践提炼 • 测试活动实施作业模板化 • 方法论应用 • 测试活动管理工具和模板标准化 • 管理系统、本地化培训 • 绩效评估与激励 法 制 谋 略

8. Contents 目录 01 测试活动管理框架及治理架构 02 端到端测试质量交付与实践 03 团队能力建设与专项赋能

9. 2.1 研发质量作战图 后勤保障 方化氛围 指挥部 质量目 标分解 装备保障 作战部队 统筹 协调 质量信 息获取 情报 收集 信息 研发 工具 链 工具优化与改进 基建保障 质量问 题分析 质量 内建 战情 分析 职能管理协同 质量基线与度量 协同保障 质量意见箱 测试侧质量评价 产研反馈聚类 业务满意度调查 文档 缺失 质量氛围营造 战术 分解 4大类 改进措 施落地 指令 下达 决策 指挥 测试缺陷分析 自动化测试 质 量 治 理 案例 遗漏 提测质量评价 测试准出标准 主 战 场 A B 质量回溯与改进 问题监控 质量飞检审计 问题智能定位 测试策 略错误 生产 问题

10. 2.2 研发质量评价模型 2层 10维 24指标 形 成 赛 马 文 化 提 升 质 量 意 识 缺陷重开率 系统质量（3） 转测成功率 开发质量（4） 组织级 测试质量（3） 案例有效覆盖率 上线质量（1） 非功能测试执行率 自动化有效覆盖率 体验质量（1） 线上故障率 过程质量（1） 质量管理评价模型 需求可测试性 需求质量（1） 项目级 开发质量（5） 测试质量（4） 发布质量（1） 模型定义 模型试点 千行代码缺陷率 案例评审通过率 缺陷验证时效 案例执行通过率 缺陷有效性 模型优化 模型推广

11. 2.3 需求段-质量保证 测试准备阶段 需求分析阶段 需求可测 试性分析 测试策略 设计 测试案例 设计 需求评审 测试案例 评审 测试数据 准备 关联需求分析 测试报告阶段 测试执行阶段 测试环境 验证 测试策略 执行 测试缺陷 管理 测试方案设计 UAT 测试 测试准出检 查、报告输出 测试案例设计及评审 核心活动 测试需求分析 需求质量 评价指标 需求可测性 需求可测性 需求完整性 需求评审通过率 上下游关联需求 非功能性需求完整性

12. 2.4 研发段-质量控制 开发端 测试端 问题下钻分析 架构设计 代码coding 核心活动 单元自测试 评审 项目提测 协同改进提升 案例有效性 转测质量 研发质量评价指标 核心活动 自测 测试方案设计 测试执行 测试案例设计 缺陷管理 非功能测试 测试准出分析 测试数据、环 境准备 自动化测试 缺陷质量 过程 管控 质量 监控 投产成功率 转测通过率 千行代码缺陷率 案例有效覆盖度 缺陷有效性 缺陷重开率 自动化有效覆盖率 非功能测试执行率 线上故障率

13. 2.5 精益段-质量改进 质量保证 质量策划 规范模型 质量基线 项目立项 过程裁剪 测试过程定义 质量评价 测试质量目标设定 关键活动识别 -测试 质量检查 需求分析 流程规范 价值流全链路 需求分析阶段 分析 A D+C P 测试准备阶段 质量视图 测试策略 设计 质量自检 测试策略有效性评估 质量控制 单元测试 开发 案例设计及 发布控制 执行 测试执行 质量改进 质量回溯 上线发布 项目复盘 项目验收 质量抽查 测试管理问题改进 测试活动缺陷质量 测试问题改进成果 测试执行阶段 生产验证 阶段 测试案 非功能测 发布 PRD评 测试需 自动化脚 手工案例 自动化 代码覆盖 UAT测 封版测 测试准 测试报 生产自 例编写 试准入评 环境准备 冒烟测试 缺陷管理 生产 审 求分析 本设计 执行 执行 率分析 试 试 出自检 告输出 动巡检 及评审 审 验证

14. 2.6 质量工具-研发缺陷分析模型及应用 分析维度及指标 研 分析过程 分析指标选择 确定分析目标，制定任务计划; 分析方法及工具 诉求 分析 改进 策划 指标 确定 发 过 数据采集与清洗 程 缺 陷 缺失值处理 去重处理 指标初步分析 异常值处理 噪音数据处 趋势分 析 分 析 缺陷下钻分析 模 型 亲和 图 问题识别及改进 基线对 比 相 理 对排 序 缺陷原 系 系 因 统 缺 统 陷等 责任 级 人 责任 帕 人 累托 图 鱼骨图 组织讨论并制定改进措施及落地实施，SQA协助推动闭环.

15. 2.7 质量工具-质量飞检审计模型及应用 质量检查视图 质量检查策略 考核指标 过程 活动 飞检质量指标 …… 研发过程符合度指标 ...... 流程规范 测试活动管理规范 产出 物 过程 阶段 关键 角色 视图1 …… 视图2 …… 检 查 角 色 视图3 ...... 需求 分析 方案 设计 案例 设计 数据 准备 定 制 视 图 检 查 方 式 检 查 纵 深 纵向深度+ 横向广度 多维组合 操作指导 质量飞检实施指引 ...... 等级 关键 词 输 入 研发活动飞检规范 质量自检实施指引 检 查 计 划 检查 时机 测试 执行 反哺 上线 发布 项目 验收 关键角色自检 +SQA抽查 飞检符合 度报告 输 出 测试待改 进问题 组织典型 TOP问题 应用实践 纵 向 深 度 与 横 向 广 度 相 结 合 团 队 自 检 与 质 量 抽 检 相 结 合

16. 2.8 质量工具-质量回溯模型及应用 问题统筹 拓展渠道 建立台账 回溯准备 回溯组织 问题收集 理念宣贯 方法导入 问题筛选 回溯目的 规范要求 回溯导向 分析工具 干系人识别 问题干系人 管理层领导 过程回放 5W1H原则 亲和图 根因分析 平台跟踪 改进闭环 进展晾晒 参与改进 鱼骨图 5WHY法 材料准备 回溯报告初稿 改进总结 改进制定 质量报告 SMART原则 技术例会 涉及交付件 定责原则 领域专家 回溯定责 专家决策 争议处理 经验共享 案例宣传 措施推广

17. 2.9 质量工具-自动化测试 严： 定义自动化需求准入规范、脚本执行 多环 境用 脚本设 计成本 脚本维 护成本 成本 规范、执行标准； 工具开 发成本 全链 路用 收益 策略筛选、应用 自动化需求分析 工具支撑 多环境应用 接口层/场景层/UI 层 自动化测试 执行平台 快： 接口服务自动扫描、自动化流水线执 行，问题一键定位，可视化的结果展 示； 多角 色用 ROI=(成本、收益） 创新型/稳健型产 品线 准： 精准评估自动化测试实施范围，保证 自动化测试有效收益； 开发环境 多阶段应用 开发联调 测试环境 系统集成测试 专项环境 持续集成 线上环境 UAT/发布验证 线上监控 多机同屏 远程测试 接口服务监控 数据仓库

18. 2.10 质量工具-接口服务 接口文档编写效率低 接口文档质量差 源头保障质量 接口联调测试问题多 系统间强依赖， 变更即时验证 联调进度不可控 系统性能无基线数据 接口变更无通知， 产生漏测 实时监控接口

19. 2.11 质量工具-基线与度量 金融研发系统测试质量工作周报 需求变更 一级中心 二级中心 需求变 更次数 转测冒烟 业务新增 修改需求 代码转 冒烟测 需求影响 影响测试 测延期 试阻塞 测试人天 人天 天数 天数 系统功能测试 测试案 缺陷总 例总数 数 自动化测试 严重及以 严重及以 严重及以 上缺陷占 上缺陷解 上缺陷关 比 决时效 闭时效 自动化测 试案例数 自动化测 试案例覆 盖率 安全测试 自动化发 接口自动 现缺陷数 化案例数 场景和UI 自动化案 例数 自动化案 安全问题 例执行数 数 工作量及周期 历史遗留 安全问题 数 开发工作量： 开发周期： 测试工作量 金融研发中心 会员及互联网平台研发中心 2 3 0 5天 0 1349 1 0.0% —— —— 259 33.0% 0 20 0 547 8 0 2.6 : 1 1.9 : 1 金融研发中心 技术管理中心 0 0 0 0 0 0 0 0.0% —— —— 0 —— 0 0 0 0 0 0 —— —— 金融研发中心 金融财务产研中心 0 0 0 0 0 691 4 0.0% —— —— 3252 93.0% 0 0 0 6504 0 0 2.6 : 1 2.3 : 1 金融研发中心 清结算及资金产研中心 1 1 0 -12天 0 989 13 0.0% —— —— 430 91.5% 0 0 0 860 0 0 2.9 : 1 1.9 : 1 星灿家保公司 保险产研中心 4 0 3.5 0 0 1112 27 7.4% 8.8 8.8 413 30.7% 0 150 12 1161 6 2 3.1 : 1 2.1 : 1 星际支付公司 跨境产研部 0 0 0 0 0 119 1 0.0% —— —— 78 39.6% 0 0 0 200 0 0 2.9 : 1 1.9 : 1 星际支付公司 支付产研中心 0 0 0 -3天 0 695 4 0.0% —— —— 154 22.7% 0 0 0 424 0 4 2.8 : 1 1.3 : 1 星联数科公司 消金产研中心 0 0 0 1天 0 855 25 24.0% 4.3 0.7 197 18.7% 0 37 56 591 17 0 3.6 : 1 2.4 : 1 星链保理公司 保理产研中心 1 0 3 6天 0 77 0 0.0% —— —— 0 —— 0 0 0 0 0 0 2.1 : 1 3.2 : 1 星数理财公司 理财产研中心 0 0 0 0 0 7079 98 2.0% 4.7 0.7 306 11.9% 0 0 0 918 46 0 3.1 : 1 1.9 : 1 星云数字公司 风控产研中心 0 0 0 0 0 445 2 50.0% 0.3 12.7 0 —— 0 0 0 0 237 0 2.7 : 1 5.2 : 1 8 4 6.5 0 0 13411 175 6.3% —— —— 5089 48.0% 0 207 68 11205 314 6 3.1 : 1 2.1 : 1 合计 纵向 横 进行 向 测试 识 质量 别 中 心 能 力 测试周期 改进 1 数据采集与分析 2 质量视图 3 基线匹配与预警 4 过程改进

20. Contents 目录 01 测试活动管理框架及治理架构 02 端到端测试质量交付与实践 03 团队能力建设与专项赋能

21. 3.1 战队资源池组织模式 两级资源池调度 测试部门 战队一 战队二 部门资源池② C端产品1 B端产品 1… 测试小组 测试小组 能力训练 能力评估 项目实战 资源借调 战队资源池① 资源池建设 资源调度申请 C端产品2 B端产品2.. 测试小组 测试小组 战队资源池① 资源池出池 机制反哺 资源调度使用 资源使用评价 分析改进

22. 3.2 领域能力及职业发展 技术总监 部门经理 技术经理 自动化测试 工程师 通用能力 行业领导者 事业经理人 系统OWNER 践行者 基本素质 做好北极星 定战略，造土壤，断事用人，聚焦能力，树立行业口碑 核心技术基因 平台化架构规划与落地能力，核心瓶颈点快速解决与知识传承能力 商业化能力 用户价值、商业价值、市场分析 超越伯乐 搭通道能力；建设极简绩效考核体系（指标设定与分解，绩效辅导、考核、面谈；实现赏罚人才，优化组织）；成为台风眼 结果担当力 拒绝畏难情绪，直面破局点，承担终极责任，带领团队拿结果 测试效率 模块化、工具化 测试核心技术能力 用最低的成本（工具成本、运维成本）实现高可用，可复用 做好导演 公司文化的诠释者和贯彻者，善于Hire&&Fire(Hire有潜力当自己领导的员工/定向Hire能力，Fire老白兔/灰太狼) 核心技术基因 借鉴、引入、研发合适的工具 商业化能力 测试活动生命周期中的过程、风险、质量、效率的可视化能力 超越伯乐 用低成本实现高可用的自动化框架 核心技术基因 场景设计、数据设计、功能设计（模块划分能力、分层设计等），严谨性和可读性 商业化能力 责任心、执行力 超越伯乐 结果导向，初步分析 核心技术基因 可视化测试数据和指标数据管理分析 商业化能力 主动影响，说服干系人进行分工协作与推进，达成共识，拿到结果 超越伯乐 洞察用户核心诉求，演绎新老场景，拥抱冲突，升级思考

23. 3.3 人员能力模型及应用评估 测试人员能力评估报告书 被评估人： 姓名 所属中心： 测试管理中心 工作岗位 例如：测试经理 获得测试管理类证书 工作年限 2至5年 评估结果 职位级别： B7 中级 通过 实践能力评估结果 测试通用能力 6 5 素质能力评估结果 案例覆盖度分析能力 4 缺陷分析能力 3 2 1 0 安全测试工具使用 测试脚本设计能力 职业素养 非功能测试方案评估 能力 性能测试工具使用 组织协调 谈判能力 领导与决策能力 自动化框架设计能力 激励能力 评委评价 基准分 沟通能力 2 自动化策略设计能力 0 测试管理工具使用 3 抗压力 1 自动化测试工具使用 业务导向 5 4 项目沟通 开拓进取 6 基准值 60 <请参评人所在中心领导填写评价评语> 自评 实际得分 中心 评价 中心评价 67 基准分 81.4 团队合作与建设 基准值 自评 实际得分 评 价 评价人： 评价时间： 100

24. 3.4 文化建设与专项赋能 第一届 质量大赛-码神之战 第三届 质量大赛-基于AI技术的智能测试。。。 第二届 质量大赛-小团队 大创造 行业前沿技术导入 + 体系化课程设计 + 质量氛围营造 = “质”地有声

25. 3.5 组织绩效提升行为模型

26. 尾篇：诗与远方 “已识乾坤大，犹怜草本青” 永怀敬畏，学无止境！

27.