在酷家乐设计工具迭代中,发生了若干个线上故障,最后排查后发现在弱网情况下触发。那么从测试的角度来说,需要额外关注的场景就远不止断网、网络故障等情况了。对于我们的设计工具来说,弱网下工具的前端显示效果,数据的稳定性,给出正确提示尤为重要
3.2 更多的弱网场景
同时,可根据ping的结果判断,参考了一些游戏测试,ping的结果超过100,则可能会出现卡延迟了,举个例子
3.3 名词解释
上行速率:用户的电脑向网络发送信息时的数据传输速率。
下行速率:是指网络向用户电脑发送信息时的传输速率。
丢包率:测试中所丢失数据包数量占所发送数据组的比率。
网络抖动:网络延时随时都在不停的变化称为抖动(延时的变化称为抖动)
四、现状分析
4.1 测试分析
根据酷家乐工具现状,可以由以下几方面入手,测试工具在弱网下的状况
4.2 不同业务下的思考
不同业务可根据业务可行,选择不同网络状况进行测试。
PC:PC由于使用有线网络更为通用,网络状态更为稳定。调整上下速率最为常用。
移动端:移动端由于环境因素的影响,可考虑:网络延迟,抖动,丢包,网络环境等网络状态。
特别网络的一些限制:如部分网络限制DNS等。
弱网测试用于覆盖所有场景显然是不合理的,更倾向与选择覆盖高P,显示或数据层面的场景。
4.5 测试场景细化
优势:快捷,不需要其他工具辅助,在network页即可设置
缺点:复杂网络状态无法模拟,仅限于当前tab页下的操作
2.fiddler代理设置弱网
优势:不局限于浏览器,适用于测试客户端等场景
缺点:复杂网络状态无法模拟
设置方法:fiddler里的rules下的Customize Rules打开后,在OnBeforeRequest中修改上行和下行速度
3.通过charles设置网络情况
Charles其实是一款代理服务器,通过成为电脑或者浏览器的代理,然后截取请求和请求结果达到分析抓包的目的
优势:可模拟更丰富的网络状态,如丢包,抖动,延迟等,且适用于客户端
缺点:安装与配置操作需要花费一定时间
配置参数:
Bandwidth:带宽,即上行、下行数据传输速度
utilisation :带宽可用率,大部分modern是100%
round-trip latency :第一个请求的时延,单位是ms
MTU :最大传输单元,即TCP包的最大size,可以更真实模拟TCP层,每次传输的分包情况。
Releability :指连接的可靠性。这里指的是10kb的可靠率。用于模拟网络不稳定,模拟丢包。
Stability :连接稳定性,也会影响带宽可用性。用于模拟移动网络,移动网络连接一般不可靠,模拟网络抖动。
Only for selected hosts:可以指定域名拦截。
Devdesign阶段,根据实际代码设计评估是否需要介入
数据变更相关。例如:涉及前后端数据交互方式变更
数据发送,回调方式变化
前端设计显示相关变更
前端自动化:基于高P场景的模拟操作,进行前端重要数据的验证。需要有数据层面校验能力支撑。
后端自动化:进行接口延迟时自动化结果对比。
后续可在前后端自动化场景中探索可行性。
推荐阅读
1. 酷家乐测试团队 影响力运营小组:回顾那个从0到1的过程
公众号:酷家乐技术质量 知乎:酷家乐技术质量
TesterHome:kujiale-qa (酷家乐质量效能)