移动App测试实战—专项测试

   我们在进行了手工的功能测试之后，也开发了一些自动化测试用例，并且做了性能测试之后，测试工作看似比较完整了。但是当我们的App在大量的用户那里被安装和使用的时候，还是会有很多我们之前没有预料的问题被反馈回来，比如：

　　· Crash的问题

　　· 设备兼容性的问题

　　· 流量使用过多的问题

　　· App导致用户手机电量消耗过快的问题

　　· 在不同的网络情况下不稳定，比如卡死和白屏的问题

　　这些问题都是上面的测试方法难以找出的，所以这里引入了一个专项的测试方法，包括：兼容性测试、流量测试、电量测试、弱网络测试、稳定性测试、安全测试和环境相关测试。

　　第一：兼容性测试

　　针对App通常会考虑这些方面：

　　1）操作系统版本

　　包括Andoird版本，iOS版本

　　2）屏幕分辨率

　　3）不同厂家的ROM

　　4) 网络类型

　　比如Wifi、3G、4G下的功能情况

　　第二：流量测试

　　在移动产品的测试中，很有必要对App使用的流量进行度量，大致来说，流量可以从用户使用的的相关性角度分为：一类是用户的操作直接导致的流量消耗；另一类是后台，即在用户没有直接使用情况下的流量消耗。

　　第三：电量测试

　　在木器电池技术没有取得巨大突破前提下，这方面始终会存在一些瓶颈，如果一些App架构设计的不好，或者代码偶缺陷，就可能导致电量消耗比较高，所以电量测试也是很重要的。

　　第四：弱网络测试

　　移动互联网产品相比PC互联网产品，有一个特点是前者使用的网络比较多样，除了Wif之外，很多时候是在移动网络下使用的，移动网络遇到的情况又比较复杂，比如地铁、隧道、体育场等。所以网络不稳定的情况是比较容易发生的，很多情况下App的一些问题是在复杂的网络情况下才会暴露，与其让用户发现和投诉这些问题，不如我们在测试阶段尽量模拟这样的网络情况，及早发现和修复这些问题。

　　第五：稳定性测试

　　在保证基本功能正确基础之上，App的稳定性就显得非常重要，如果一个App经常出现闪退或者卡死，那么用户体验就会受到很大伤害，在有其他竞争产品的情况下很容易造成用户的流失。

　　第六：安全测试

　　包括安装包的安全测试（能否反编译代码、安装包是否签名等）、敏感信息测试、软键盘劫持、账户安全、数据通信安全等。服务器端的SQL注入测试、XSS跨站脚本攻击等。

　　第七：环境相关的测试

　　在实际项目中，有一些缺陷我发现是和App所处的运行环境相关的，所以设计测试的时候，要多考虑这些场景，比如：

　　1）干扰测试

　　收到电话、收到短信、收到通知栏消息、无电提示框弹出、第三方安全软件告警弹出。

　　2）权限测试

　　一些用户在实际使用App的时候回有意识阻止某些功能。例如有的用户感觉让某个App访问电话本或者相册可能泄漏隐私，就在手机中设置了禁止了该App访问相册的权限。

　　3）边界测试

　　手机环境本身也有其边界情况需要在测试中覆盖。常见的场景有：

　　可用存储空间过少、没有SD卡/双SD卡、飞行模式、系统时间有误（晚于和早于标准时间）、第三方依赖（比如我们的App依赖第三方App，但是现在第三方App没有安装或者版本过低的测试情况）。

Web测试和App测试有什么区别？

WEB测试和App测试从流程上来说，没有区别。都需要经历测试计划方案，用例设计，测试执行，缺陷管理，测试报告等相关活动。从技术上来说，WEB测试和APP测试其测试类型也基本相似，都需要进行功能测试、性能测试、安全性测试、GUI测试等测试类型。

　　他们的主要区别在于具体测试的细节和方法有区别，比如：性能测试，在WEB测试只需要测试响应时间这个要素，在App测试中还需要考虑流量测试和耗电量测试。

　　兼容性测试：在WEB端是兼容浏览器，在App端兼容的是手机设备。而且相对应的兼容性测试工具也不相同，WEB因为是测试兼容浏览器，所以需要使用不同的浏览器进行兼容性测试（常见的是兼容IE6，IE8，chrome，firefox）如果是手机端，那么就需要兼容不同品牌，不同分辨率，不同android版本甚至不同操作系统的兼容。（常见的兼容方式是兼容市场占用率前N位的手机即可），有时候也可以使用到兼容性测试工具，但WEB兼容性工具多用IETester等工具，而App兼容性测试会使用Testin这样的商业工具也可以做测试。

　　安装测试：WEB测试基本上没有客户端层面的安装测试，但是App测试是存在客户端层面的安装测试，那么就具备相关的测试点。

　　还有，App测试基于手机设备，还有一些手机设备的专项测试。如交叉事件测试，操作类型测试，网络测试（弱网测试，网络切换）

　　交叉事件测试：就是在操作某个软件的时候，来电话、来短信，电量不足提示等外部事件。

　　操作类型测试：如横屏测试，手势测试

　　网络测试：包含弱网和网络切换测试。需要测试弱网所造成的用户体验，重点要考虑回退和刷新是否会造成二次提交。弱网络的模拟，据说可以用360wifi实现设置。

　　从系统架构的层面，WEB测试只要更新了服务器端，客户端就会同步会更新。而且客户端是可以保证每一个用户的客户端完全一致的。但是APP端是不能够保证完全一致的，除非用户更新客户端。如果是APP下修改了服务器端，意味着客户端用户所使用的核心版本都需要进行回归测试一遍。

　　还有升级测试：升级测试的提醒机制，升级取消是否会影响原有功能的使用，升级后用户数据是否被清除了。