性能测试实例绪论.ppt

性能测试培训 蔡立志 上海市计算机软件评测重点实验室 上海计算机软件技术开发中心 内 容 安 排 性能测试的目的 性能测试的概念 性能测试的策略 性能测试的计划 性能测试的结果分析 性能测试的案例 WEB 测试经验交流 1. 性能测试目的 性能疑虑： 我的系统响应时间太慢了，到底问题出哪里？ 要花多少时间做完一笔交易？ 什么样的配置提供最好的性能？ 那些因素降低了交易响应时间？ 系统在无错的情况下承受多大的及多长的时间的负载。 1. 性能测试目的 评估系统的能力： 测试中得到的负荷和响应时间数据可以被用于验证所计划的模型的能力，并帮助作出决策。 识别体系中的弱点（瓶颈）： 受控的负荷可以被增加到一个极端的水平，并突破它，从而修复体系的瓶颈或薄弱的地方。 系统调优： 重复运行测试，验证调整系统的活动得到了预期的结果，从而改进性能。 1. 性能测试目的 检测软件中的问题： 长时间的测试执行可导致程序发生由于内存泄露引起的失败，揭示程序中的隐含的问题或冲突。 验证稳定性（resilience）可靠性（reliability）： 在一个生产负荷下执行测试一定的时间是评估系统稳定性和可靠性是否满足要求的唯一方法。 1. 性能测试目的-检查可靠性举例 确定系统在连续的高工作负载下的稳定性级别。 强制系统在短时间内处理大量任务，以模拟系统在数周或数月的时间内通常会遇到的活动类型。 1. 性能测试目的- 确定瓶颈举例 您可以运行测试以确定系统的瓶颈，并确定哪些因素导致性能下降，例如，文件锁定、资源争用和网络过载。 1. 性能测试目的-度量系统容量举例 查看现有系统中性能与负载间的关系，并确定出现响应时间显著延长的位置 “拐点”。可以确定是否需要增加资源以支持额外的用户。 2. 性能测试的概念 性能： 系统的性能是一个很大的概念，覆盖面非常广泛，对一个软件系统而言包括执行效率、资源占用、稳定性、安全性、兼容性、可扩展性、可靠性等等。 负载压力是系统性能的一个重要方面。 2.1 性能测试的概念 利用测试工具，模拟大量用户操作，对系统增加负载 ，考察系统的输出项，例如吞吐量、响应时间、CPU负载、内存使用等如何决定系统的性能，例如稳定性和响应等。 模拟情况： 正常负载 峰值负载 异常负载 2.2 性能测试的时机 时机1： 完成系统集成 完成功能测试 系统试运行阶段 最好的时机： 不用担心产生测试的垃圾数据问题 不用担心影响系统运行问题 2.2 性能测试的时机 时机2： 系统运行期间出现性能问题。 目的：查找问题的原因。 注意事项： 必须备份运行的数据 设定专用的策略查找原因 必须采用采用出现问题的数据 2.2 性能测试的时机 时机3 硬件升级： 目的：提高用户的投资效益 在旧系统上查找性能的瓶颈 在系统升级以后进行系统前后的比较。 升级前后的系统均应该做性能测试 2.3 性能测试的分类 性能测试类型包括： 负载测试：确定在各种工作负载下系统的性能，目标是测试当负载逐渐增加时，系统各项性能指标的变化情况 。 强度测试： 强度测试是一种性能测试，他在系统资源特别低的情况下软件系统运行情况。 容量测试：确定系统可处理同时在线的最大用户数（在用户可接收的范围内）。 压力测试：通过确定一个系统的瓶颈或者 最大使用极限 的测试 。 2.3 性能测试的分类 疲劳强度测试: 系统稳定运行情况下能够支持的最大并发用户数或 者日常运行用户数，持续执行一段时间业务，通过综合分析交易执行指标和资源监控指标来确定系统处理最大工作量强度性能的过程。 2.3 性能测试的分类 大数据量测试 独立的数据量测试 针对某些系统存储、传输、统计、查询等业务进行大数据量测试 综合数据量测试 和压力性能测试、负载性能测试、疲劳性能测试相结合的综合测试方案 2.4性能测试的工具 手工测试： 多台电脑和同样数目的操作人员，在同意时刻擦作，几下响应时间。 缺点： 需要的人力和机器设备 无法解决测试人员的同步问题 无法捕捉程序内部的变化情况 2.4性能测试的工具 自动化性能测试工具 商业性能测试工具： 开源性能测试工具 自主开发工具测试 2.4 性能测试的工具 自动化测试工具的弱点： 缺乏功能点的校验 对有些控件支持得不好 不能达到真实模拟负载 脚本的支持不够灵活 报错定位不够详细 2.4 性能测试的工具 自动负载测试工具盲点： 在负载测试中，不进行功能校验，就是当功能错误发生时，测试工具不能够记录产生的功能性错误，这就忽略了负载压力情况下的功能不稳定问题。 在负载压力测试过程中记录所有虚拟用户的操作及服务器的响应是当前负载压力测试技术发展的最大挑战。 但测试过程中的附加记录会导致资源消