浅析基于计数抽样理论的软件测试用例评审过程.docVIP

浅析基于计数抽样理论的软件测试用例评审过程 　　摘要：对软件测试用例实施同行评审不仅保证了软件测试用例的质量，也在一定程度上保证了整个软件测试过程的质量水平。然而面对成百上千的测试用例，如何能够快速有效的完成同行评审是目前工作中面临的一个实际问题。本文基于GB-T 2828.2提出了一套针对软件测试用例同行评审的流程，通过将计数抽样理论应用于软件测试用例同行评审中，降低评审工作量，提高评审效率。 　　关键词：测试用例；软件测试；同行评审；计数抽样理论 　　中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2015）22-0138-02 　　软件测试是软件生命周期中的重要阶段，测试的效果直接影响到软件产品的质量[1]。软件测试过程中会产生一系列测试文档，例如测试策划阶段产生的测试需求规格说明、测试计划文档，测试设计阶段产生的测试说明文档，测试执行阶段产生的测试记录、测试问题报告、测试报告等文档。其中，工作量最大、也最为重要的工作就是设计测试用例、编写测试说明文档。而对测试过程的质量控制通常是通过同行评审的方式实现，同行专家会对测试项、测试用例进行审查。在“检测和校准实验室能力认可准则在软件检测领域的应用说明（CNAS-CL45）”中要求：由熟悉软件检测过程以及软件测试的标准、规范、规程，软件质量评价和软件测试质量评价的人员，负责对软件测试人员测试工作实施质量监督，审核软件测试过程和形成的软件测试工作产品是否符合相应的标准、规范[2]。 　　然而，对于某些功能较多、性能精度等要求较高的软件，测试用例的数量可能有成百上千条，实际评审过程中对所有测试用例进行全数检验是不现实的，也是没有必要的。通常，针对测试用例的同行评审在执行过程中对于每种测试类型随机抽取至少20%的用例进行正确性、合理性的评价。但是很多文献通过理论证明，采用百分比抽样检验存在着“大批量严，小批量宽”的弊端[3]，且国际中已普遍淘汰百分比抽样检验。 　　GB-T 2828.2是一个按极限质量LQ检索的计数验收抽样检验系统，适用于孤立批检验[4]。本文尝试将计数抽样理论应用到软件测试用例同行评审中，基于GB-T 2828.2和本组织实际情况提出了一套针对软件测试用例同行评审的流程。通过采用GB-T 2828.2计数抽样方法克服了传统百分比抽样法的不合理性，在降低抽样的样品数量的同时保证了通过评审的测试用例达到规定的“极限质量”，提高了测试用例同行评审的工作效率。 　　1 计数抽样的实施过程 　　GB-T 2828.2提供了两种检验模式，其中模式A适用于“当生产方和使用方都把批作为孤立检验”的情况，即要求硬件的检验批是按类型生产的一个批。本组织测试过程的实际情况是，对于某配置项软件测试项目，一般只任命一名测试人员为负责人，测试过程涉及到的所有文档均由该人员编写，且各测试用例之间无连续性，因此基本上可将全部用例视为一个检验批，并可参考模式A的抽样方案。 　　本文提出的计数抽样程序如图1所示。首先确定检验批量、再确定极限质量比，接着抽取检验样品并进行评审与判定。后文将对具体流程进行详细介绍。 　　2 批量N的确定 　　在计数抽样检验中定义“为判定质量而一次提交检验的一批产品为交验批，批中所含单位产品的数量称为交验批量N”。根据本组织的实际情况，由于某一软件配置项的全部测试用例均由同一测试人员编写完成，可基本视作生产条件相同、质量稳定，因此全部测试用例的数量即为批量N。 　　3 极限质量LQ的确定 　　极限质量是指对一个被认为处于孤立状态的批，为了抽样检验限制在某一个低接收概率时的质量水平，极限质量的规定方法与AQL相似，只不过极限质量是批不可容许的质量水平。在数值上，极限质量LQ表示为每百单位信息点钟的不合格百分数[5]，理论上最小值是0%，最大值是100%，数值越高表示使用方对质量的要求越松。 　　对软件测试用例进行计数抽样检验，首先就需要定义一个合理的极限质量。在本组织实际工作中，项目等级通常根据重要程度被分为A、B、C三类，其中A类项目是最为重要的项目。因此，本文建议在一般情况下，可以根据项目的重要等级定义极限质量，对于重要等级较高的项目，可将其极限质量LQ定义在一个较低的数值，从而保证该项目全部测试用例的“整体水平”。例如 A类项目可将极限质量定义在0.5%，B、C类项目的极限质量值可高于A类项目。不同的组织可根据自身的实际情况自行定义极限质量LQ。值得注意的是，极限质量LQ必须在同行评审实施前定义，且一经定义，在对该批软件测试用例审核过程中不应改变。 　　4 抽取检验样品 　　根据组织定义的批量和极限质量可参照GB-T 2828.2 4.5章节的规定查找所使用的抽样方案，用指定的批量和极限质量作为检索值，可