移动多端自动化测试平台建设.pdfVIP

移动多端自动化测试平台建设

作者：王知明

来源：《中国新通信》2021年第19期

【摘要】本文介绍了移动多端自动化测试平台的建设思路，该平台实现了对国内移动政

务服务应用的自动化真机在线测试和智能化测试结果在线分析，替代传统人工测试。提供给各

级政府在政务服务APP、H5、支付宝小程序、微信小程序等移动渠道研发、上线、运维过程

中，对功能、性能、兼容性、稳定性、安全性等全维度测试的能力，并提高软件质量和市场竞

争力。文章对自动化测试平台进行概述，分析了自动化平台结构设计理念，阐述了自动化平台

设计和实现思路。

【关键词】自动化在线测试软件质量市场竞争力

一、测试平台需要解决的问题

目前市场上有部分移动政务APP应用在安装、启动、卸载时存在耗时较长，使用过程中

出现闪退、卡死等常见的问题;同时，一些软件病毒、恶意插件、漏洞和敏感数据也在严重影

响用户信息安全。因此用户对移动政务服务应用在兼容性、性能、稳定性、安全性上面提出了

更高的要求。自动化云测平台可以协助人工提供这方面的测试能力，很好的弥补了当前测试阶

段存在几个典型的痛点：

人工1.测试为主，效率低下：目前政务服务App质量团队的测试手段依然以手工测试为

主，人工成本较高。

缺乏2.安全渗透测试技术：政务服务领域内研发团队主要以面向政务业务为主，缺乏自动

化安全测试的专业技术。

适配机型复杂：传统3.测试方式下，无法覆盖市面上众多的手机型号。

二、测试平台功能矩阵

为了解决移动政务服务应用在“性能”、“安全性”、“稳定性”、“兼容性”以及功能上的问

题，规范建设者们在移动政务应用建设前、中、后期的专项测试标准，让不同技术实力的开发

者所开发的移动政务应用均按统一标准进行测试，为全国移动政务应用开发领域的健康发展提

供规范化、自动化的品控服务。测试平台主要功能矩阵如下：

性能测试2.1

在APP的安装启动卸载过程中，检测APP的安装卸载时长，启动时长;在APP运行过程

中，实时检测APP的前端性能数据，例如：FPS，流量，电量，内存，CPU，上行流量，下行

流量等性能。测试人员拿到获取到的性能可以实时的分析此款APP在测试过程中可能会存在

的哪些问题，例如：内存泄漏，加载时长过长，流畅度较差，加载图片过大等一系列问题。移

动终端应用，不管是Native还是WebView的应用，对性能要求都非常高，主要是卡顿、耗

电、速度这几个常见关键性的指标，而这类测试重复性强，指標路径固定，自动化测试可以更

快捷地完成性能测试任务。

兼容性测试2.2

不同的业务可能会有不同的适配要求，一般情况下平台能提供几百甚至上千台机器进行测

试，包括在不同操作系统（android、ios、鸿蒙，每个还包含多个版本）、不同厂家手机（华

为、小米和苹果等）、不同屏幕尺寸和不同带宽等方面的测试。

稳定性测试2.3

APP的稳定性一般通过闪退率、卡顿等可用性指标来衡量。需要通过一定时间内的持续使

用或暴力测试来发现问题。

提到稳定性测试大家都会想到用系统自带的Monkey工具进行测试，此工具既易上手也实

用，但运用起来有非常多的讲究和技巧，简单的Monkey工具不一定能完成使命，不能完全测

试出应用的稳定性情况。很多时候，需要测试开发人员按照一定规则自定义智能探索脚本，最

大限度覆盖APP的功能，保证稳定性测试的全面性。

功2.4能测试

功能测试一般会通过运行自动测试用例来检测功能是否符合预期。往往测试结果是和业务

紧密相关的。

关于功能测试的争议比较多，因为产品都需要快速迭代，而脚本的稳定性、实现时间等成

本开销大，真正发挥作用也需要不断地打磨，并且还有很多后期维护成本，所以比较折中的办

法是做一些BVT测试和持续集成配合，在开发编译新的build后直接运行这些核心的BVT用

例，以免出现严重的Regression/Block问题，日常的工作中选定较小范围的用例及适合的框架

一般就可以解决问题。

安全2.5测试

随着互联网的发展，手机移动端的普及，移动APP风险漏洞也逐渐暴露出来。

所谓的风险漏洞一般来说是应用代码编写过程中出现的安全漏洞、编码隐患、甚至业务逻

辑上的缺陷。APP风险漏洞往往带来很多危害，诸如应用内信息泄露、本地拒绝服务等多种安

全问题，严重的可能影响应用正常运