软件测试方法和应用 第九章 非功能性测试.pptVIP

第九章 非功能测试 本章内容 非功能测试 性能 性能测试 性能测试 性能测试 性能测试 性能测试过程 性能测试规划 性能测试规划 性能测试规划 分析性能测试需求 分析性能测试需求 分析性能测试需求 分析被测系统业务 用户对系统地使用情况 任务分布图示例 性能测试规划 规划性能测试环境 规划性能测试环境 规划性能测试环境 性能测试工具 性能测试规划 性能测试计划 性能测试设计和开发 性能测试设计和开发 并发用户数设计 性能测试设计和开发 性能测试执行与监控 性能测试执行 结果分析与系统调整 结果分析 结果分析 性能调整 兼容性测试 案例 兼容性测试步骤 兼容性测试步骤 兼容性测试步骤 确定硬件配置 确定硬件配置 确定硬件配置 如何获得硬件 用户界面测试 用户界面测试 用户界面测试 用户界面测试 用户界面测试 用户界面测试 用户界面测试 安装测试 安装测试 安全测试 安全性测试 安全性测试步骤 安全性测试方法 安全性测试方法 应用软件的安全性测试 软件文档分类 文档测试 测试用户手册 测试在线帮助 小结 很难给出性能的确切定义，不同的项目会有不同的性能目标。响应时间和吞吐量是最关键的两个性能目标，因为它们直接被用户感受 性能测试是通过模拟典型用户行为验证系统是否达到了期望的性能目标 一个简单的性能测试模型包括三个步骤：性能测试计划，创建脚本和执行测试，分析结果和调整系统 性能测试工具是执行性能测试的好帮手 方法 除了采用与用户手册测试方法类似，应该考虑如下因素： 逐行阅读在线帮助，确保描述的正确性 执行帮助程序以确保它的可靠性 验证帮助索引 验证超链接和相应的内容 帮助风格应是面向操作的：在线帮助应该比用户手册更高效，因为用户阅读在线帮助的时候通常更迫切地想得到到答案 任务 搭建与维护测试环境 选择和配置关键测量指标 关键测量指标是在实际的性能测试过程中需要监控和分析的测量结果，通过观察这些测量结果来确认系统是否达到定义的性能目标。 执行测试用例 监控测试执行 保存测试结果 目标 分析测试结果，确定系统是否存在性能问题 输出性能测试报告 如果发现存在性能问题，则由相关责任人负责修改，修改完毕后，可能引起另一个性能测试周期用以验证问题是否解决 原则 由外而内，由表及里，层层深入 从最终用户直接可以感受到的响应时间入手，如果测试结果显示满足用户对性能的期望，则系统的性能满足要求，否则说明系统存在性能问题 确定系统瓶颈是出现在网络环节还是服务器环节 CPU 内存 磁盘 层层推进，判断相应环节的更细组件的响应时间，直到最后找到造成性能问题的根本原因 CPU Process Time≤ 85% Process Queue Length ≤ 2*处理器个数 内存 Available memory ≥ 0 Pages/秒（Page in/s+Page out/s）Page in的值需≤80 硬盘（磁盘的忙碌程度） Disk Time≤ 80% 步骤 确定问题 确定原因 确定调整目标 测试解决方法 分析调整结果 定义 验证被测系统是否可以在各种可能的运行环境中正常工作的测试活动 为什么需要进行兼容性测试 硬件类型、品种多种多样 软件类型、品种多种多样 软硬件之间客观存在的差异，使得系统在运行时存在在某些环境中工作正常但却在其它环境中出现问题的情况 内容 减少软硬件的组合数目 案例 如果要执行一个完全的兼容性测试，配置组合将是一个巨大的数字，以窗口在线游戏程序为例，假设游戏支持大约350个可能的显示卡，200个声卡，800个调制解调器，1200个打印机，这样就有350×200×800×1200种组合 即便你只执行这些不同配置条件下的一定数量的测试用例，测试用例的数量也是相当可观的 对软件来说 关注被测系统与其它软件之间的互操作和信息共享是否正常（需兼容的应用程序和它们的具体版本在规格说明书中定义） 兼容性测试的软件环境通常，包括三方面 平台和应用软件版本： 需要考虑被测系统使用什么平台 系统设计时考虑兼容的应用程序 被测系统自身的向前向后兼容性 标准： 概要标准用于指导产品的基本操作属性，如颜色、感官、支持的特性等 详细标准规定了产品的详细信息比如文件格式，通讯协议 对软件来说 兼容性测试的软件环境通常，包括 数据共享： 如果数据在程序间共享，应遵守相应的协议和标准数据格式 考虑文件存储和装载、输入输出、剪切、拷贝和粘贴 实时数据传输方法下的共享信息是否正确 测试步骤 对于硬件来说 确定需要的硬件类型 确定可用的硬件品牌、模块和设备驱动程序 确定被测系统可能用到的硬件特性、模式和选项 构造硬件配置列表 确定被测系统在这些硬件组合下的独特属性 通过如下方式确定你需要的硬件类型： 问问自己需要什么样的硬件配置