网站稿件管理发布系统效率测试结果判定方法.docVIP

网站稿件管理发布系统 性能测试结果判定方法  性能测试结果判定方法 本次针对网站稿件管理发布系统的性能测试，重点考察测试人员对软件性能测试需求的正确理解和基本测试能力，通过对返回的性能测试结果进行评分来衡量。在此制订评分判定方法。 一、软件的需求规格说明书规定的性能要求 主要单点操作在5秒钟内完成； 系统支持50人在线； 稿件管理的主要功能至少支持20人并发访问； 上传512K大小文档，速度达到20篇/分钟； 系统可以连续稳定运行12小时。 注：单点操作指单用户对单一功能点的操作；主要功能指能够体现系统性能特征的操作。 二、判定原则 性能测试结果应完整体现上述5项要求，正确地给出一项测试结果记20分，合计100分；另外分别在测试报告、测试计划、用例设计和原始记录文档中给出完整性描述的各记5分，合计25分，最后的总分满分125分。 三、测试结果评分方法 需求一：主要单点操作在5秒钟内完成 重点考察各参加实验室对单点操作的性能要求的理解和把握，是否能够选取具有典型性能意义的单个功能点，以及执行单点基准性能测试的能力。 软件跟性能相关的主要单点操作有：登录、新增稿件、修改稿件、稿件单点查询、稿件复合查询、稿件显示、文档上传、文档下载、文档查询等9项操作。针对这9项操作可能的测试结果：测试结果完整包含5个（含）以上的单点操作，并且每个单点操作提供响应时间，同时有对应用例或脚本，记20分，以下每少一个单点操作的响应时间，扣除4分；有测试结果但没有对应用例脚本扣2分。 需求二：稿件管理的主要功能至少支持20人并发访问 目的是考察各测试人员对并发访问的理解，是否能够正确选取具有性能特征意义的功能点，以及执行并发访问测试的基本能力。 稿件管理与性能相关主要操作有5项：新增稿件、修改稿件、稿件单点查询、稿件复合查询和稿件显示，可能的测试结果：测试结果完整包含4个（含）以上操作，并提供响应时间，计20分；以下每少一个操作，扣除5分。对于每个操作： 提供是否支持20人并发访问的结果，记3分； 提供响应时间，记2分。 需求三：上传512K大小文??，速度达到20篇/分钟 目的是考察各测试人员对吞吐量测试的理解和执行基本测试能力。 提供吞吐率结果，记15分，提供对应用例或脚本，记5分，合计20分。 需求四：系统支持50人在线 目的是考察各测试人员对日常真实运行场景的模拟设计和执行的基本测试能力。 提供50人是否成功上线的执行结果，记15分，提供对应用例或脚本，记5分，合计20分。 需求五：系统可以连续稳定运行12小时 目的是考察各测试人员对系统稳定性测试的理解，是否能够设计运行场景对系统执行12小时以上的疲劳强度测试。 提供系统连续运行12小时的测试结果，记15分，同时还要求场景设计包含多个主要功能操作，合计满分20分。 提供综合场景设计包含3个（含）以上主要功能操作，记5分； 提供综合场景设计包含2个主要功能操作，记3分； 提供综合场景设计包含1个主要功能操作，记1分。 四、文档审查评分方法 针对5个性能测试要求，在提供相关文档中有完整描述的分别记5分，合计25分。具体评分如下： 测试报告中对选定测试点有完整描述，记2分； 测试计划（方案）、用例设计、原始记录中对选定测试点有完整描述，各记1分； 如果相关文档对选定测试点有描述，但不够规范和完整，可适当扣分。