Ch11软件测试自动化STMT.pptxVIP

软件测试方法和技术 - Ch.11软件测试自动化朱少民Kerry Zhumailto:Zhu.Kerry@Zhu.Kerry@gmailmailto:Zhu.Kerry@第十一章 软件测试自动化Zhu.Kerry@11.1测试自动化的内涵11.2 测试工具的分类和选择11.3 测试工具的主流产品介绍 11.4 IBM-Rational产品的整体解决方案11.5 Mercury Interactive产品的整体解决方案11.6 Compuware产品的整体解决方案11.1测试自动化的内涵Zhu.Kerry@11.1.1 为什么要软件测试自动化11.1.2 自动化测试的引入和应用11.1.3 测试自动化的基本结构11.1.4 测试自动化的原理和方法 11.1.5 测试自动化普遍存在的问题手工测试的局限性Zhu.Kerry@ 通过手工测试无法做到覆盖所有代码路径; 许多与时序、死锁、资源冲突、多线程等有关的错误通过手工测试很难捕捉到 在系统负载、性能测试时，需要模拟大量数据、或大量并发用户等各种应用场合时，也很难通过手工测试来进行 在进行系统可靠性时，需要模拟系统运行十年、几十年，以验证系统能否稳定运行，也是手工测试无法模拟的。 如果有大量（几千）的测试用例，需要在短时间内完成，手工测试又怎么办呢？ 测试可以发现错误，并不能表明程序的正确性。 手工测试的局限性 （2）Zhu.Kerry@自动测试定义软件系统功能规格书(Spec)只是从书面上的一套软件产品是由一套完整的可运行的测试来定义的测试所有可能情况将遭遇“组合爆炸”问题Win98, WinME, WinNT, Win2k, WinXP, WinXP TablePC Ed, WinXP MediaCenter Ed, Longhorn, etcEnglish, German, Japanese, Chinese, Arabic, Thai…Office 97, Office2000, Office XP, Office 2003…X86 32-bit, Intel 64-bit, AMD 64-bit, Alpha, MIPS…SQL Server 6.5, SQL Server 7.0, SQL Server 2000… Visual Studio 6, VS .NET, VS .NET 2003, Whidbey…手工测试的局限性 （2）Zhu.Kerry@代码全部Code Path测试覆盖也几乎不可能每一个if…else…或switch语句就会把情况增加一倍许多异常处理代码在正常使用中不会碰到许多与时序，死锁，资源冲突，多线程有关的错误很难捕捉到每一个产品都会有不同的版本外加各自的SP与QFE (Quick Fix Engineering, 又称Hot fix)NT4, VS6 SP1~SP5, Windows 2000 SP1-SP4VS .NET, SQL Server SP1 – SP3可重复使用的自动测试对产品未来版本与Service Pack的测试将有事半功倍的效果自动化测试带来的好处Zhu.Kerry@1. 缩短周期 Testing cycle - Regression Testing2. Attributes of TA,Speed 速度Efficiency 效率Accuracy and Precise 准确、精确 Relentlessness 无情3. 容易实施、结果可靠4. 做手工不能做手工测试自动测试手工测试 vs.自动测试Zhu.Kerry@耗费时间低可靠性人力资源不一致性仅对于一次性的测试有益 速度 可重复 覆盖率 可靠 可以再度使用 重复测试节省时间正确认识测试自动化Zhu.Kerry@不现实的期望注定测试自动化的失败测试自动化能：显著降低重复手工测试的时间建立可靠、重复的测试，减少认为错误增强测试质量和覆盖率测试自动化不能：完全替代手工测试和手工测试工程师保证100%的测试覆盖率弥补测试实践的不足各自特点Zhu.Kerry@软件测试自动化(TA)虽然具有很多优点，但只是对手工测试的一种补充，TA绝不能代替手工测试，有各自的特点： 在系统功能逻辑测试、验收测试、适用性测试、涉及物理交互性测试时，多采用黑盒测试的手工测试方法； 单元测试、集成测试、系统负载或性能、稳定性、可靠性测试等比较适合采用TA； 对那种不稳定软件的测试、开发周期很短的软件、一次性的软件等不适合测试自动化 工具本身并没有想象力和灵活性，根据经验报道，自动测试只能发现15%的缺陷，而手工测试可以发现85%的缺陷；TA工具在进行功能测试时，其准确的含义是回归测试工具，因为工具不能发现更多的新问题，但可以保证对已经测试过部分进行测试的准确性和客观性 测试自动化项目的本质Zhu.Ke