前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >测试左移实践探讨 :测试左移在腾讯地图SDK的实践

测试左移实践探讨 :测试左移在腾讯地图SDK的实践

作者头像
腾讯移动品质中心TMQ
发布2018-02-08 14:45:20
1.3K0
发布2018-02-08 14:45:20
举报
文章被收录于专栏:腾讯移动品质中心TMQ的专栏

我理解的"测试左移",即将测试活动与开发活动结合更加紧密, 同步于开发活动甚至早于开发活动便开始的质量保障活动。业界已有关于测试前置的一些讨论, 因此本文也沿用测试前置的概念. 本文将讲解测试前置在腾讯地图SDK的实践情况。鉴于APP与SDK的不同形式,APP类产品在实践测试前置方法时需做适当调整。

一、持续测试过程

测试前置的前提是持续集成和持续测试,持续测试的前提是自动化测试。自动化测试的实现离不开好的测试框架和测试平台的支持。地图SDK之所以能逐渐做到测试前置,正是依赖于地图SDK在自动化测试的积累。详细的测试框架介绍请期待后续tmq相关文章。

持续测试过程中,开发工程和测试工程的统一使得自动化测试校验点增强,同时也使得测试用例开发与开发功能开发同步进行变得可能。

二、测试前置活动

1、引入测试前置活动的原因

通过对版本bug的系统分析,我们发现基础类问题占比达到30%(如图1),基础类问题是可以通过codereview,静态扫描,或者单元测试活动发现的,大量的基础类问题遗留到测试执行阶段,浪费了测试成本,也增加了问题定位成本。另外通过Coverity扫描发现静态扫描问题多 (如图2),潜在稳定性风险大。因此我们认为测试前置活动是有必要的。

图1 Bug根因构成

图2 静态扫描问题对比

2、测试前置活动

测试前置活动包含两方面内容,一是开发参与质量保证;二是测试活动提前。开发参与质量保证的活动有CodeReview,进行静态扫描并扫清扫描中出现的问题,和高质量的自测。业界开发自测通常采用UT的方式。在本产品中,自测以功能验证方式为主。

图3描述了从需求评审开始,测试线与开发线并行进行的活动过程。在开发线,开发通过需求文档映射到设计文档(由于互联网应用的快节奏,在小feature中可跳过。) 这时测试线同步进行手工测试用例的设计和编写。开发线进一步在梳理接口后输出比较确定的接口定义,测试线基于接口定义进行自动化用例和测试demo的实现。开发代码完成时,由于在同一工程下,测试用例代码可实时(或相对实时)与开发代码集成和调试,开发code review,自测的过程的同时自动化测试用例也在调试中。提测后,测试进入手工测试环节,关注在复杂逻辑和效果验证。

图3: 测试前置流程

汇而总之,目前采用的测试前置活动如下:

(1)手工用例提测前输出;

(2)自动化用例提测前编写和调试;

(3)代码静态扫描;

(4)code review。

3、测试前置效果检测

我们定义测试交付件包括手工用例,自动化用例,bug和符合测试准出标准的被测包。我们通过每个版本中的bug ODC分析来检查是否有基础问题遗留到后期手工测试阶段,遗留的问题是由于什么原因引起的,进而反作用于测试前置流程,完善测试前置流程。

以下举例说明。图4和图5为一次ODC分析结果,从图中可以看出基本功能覆盖引起的问题占问题总量40+%,基础类的问题(条件检查、初始化、算法基本逻辑等)占有效问题50%。说明本次测试中,测试前置效果不好。进一步分析,基础类问题集中在一个feature上,最终调研发现,该feature没有开展测试前置活动。

图4: ODC触发原因分析

图5: ODC缺陷类型分析

汇总一下, 检测步骤如下:

(1)测试结果ODC分析;

(2) 结果反馈跟进;

(3)反馈完善测试前置流程和方法。

三、测试前置的下一步——UT

从上面的讨论我们已了解,单元测试也是测试前置的重要活动。但单元测试在互联网产品尤其是前端实施阻力非常大,因此我们通过一定原则筛选出一些适合做单元测试的模块,目前正在实践中,有一定实践效果再与大家分享。

筛选的原则如下:

1、逻辑性强的模块;

2、当前测试用例代码覆盖率低的模块;

3、代码可测性高的模块:我们是从函数扇入扇出、函数行数、函数深度、函数圈复杂度等方面进行函数分级。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2017-05-26,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 腾讯移动品质中心TMQ 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 一、持续测试过程
  • 二、测试前置活动
  • 三、测试前置的下一步——UT
相关产品与服务
持续集成
CODING 持续集成(CODING Continuous Integration,CODING-CI)全面兼容 Jenkins 的持续集成服务,支持 Java、Python、NodeJS 等所有主流语言,并且支持 Docker 镜像的构建。图形化编排,高配集群多 Job 并行构建全面提速您的构建任务。支持主流的 Git 代码仓库,包括 CODING 代码托管、GitHub、GitLab 等。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档