计算机系统性能评价综述.ppt

. 计算机系统性能评价综述Computer System Performance EvaluationSummary 国家智能计算机研究开发中心 性能评价小组 Performance Evaluation Group 主要内容 性能评测涉及的主要内容 性能评测的几个研究方向 性能评测的几个重要的里程碑 性能评测的目的 选择 在众多的系统中选择一个最适合系统，即在一定的价格范围内选择性能最好的系统，达到较好的性能/价格比； 改进 对已有系统的性能缺陷和瓶颈进行改进和提高 设计 对未来设计的系统进行性能预测，在性能成本方面实现最佳设计或配置 什么是计算机系统性能评测 通过评测程序获得特定计算机系统运行预 定义任务或任务集时的性能特征。 主要研究内容 评测程序——负载workload、基准程序Benchmark 性能特征——性能指标performance metrics 评测手段——分析analysis 模拟simulation 测量measurement 监控Monitor 优化Optimization 性能评测涉及的主要内容 负载workload、基准程序Benchmark 性能指标performance metrics 分析analysis 模拟simulation 测量measurement 监控Monitor 优化Optimization 负载的几种类型 Types of Workload 指令加 Addition instruction 用加法指令的执行快慢来衡量系统性能 混合指令 instruction mixes (MIPS/MFLOPS) Load/Store/compare/branch/logical…. 内核 Kernel/processing Kernel 综合性应用程序Synthetic program 开始在测试程序中引入I/O 程序都过小，难以代表内存和磁盘的真实行为 应用基准程序Application benchmark 更能模拟应用实际 流行的基准程序 Popular benchmark 负载的选取 涉及的服务 Service Exercised 负载的选取级别 Level of detail 各种用户请求得使用频率； 使用频率最好的请求； 对资源的平均需求； 所需资源的分布 负载的表述 representation 请求的到达方式 所需资源 资源的使用模式 各种时间的设定timeliness 举例（分时系统和网络系统） 负载的选取（续） Tracing 跟踪 Logging 日志 负载的特征化 Workload Characterization techniques 对真实负载(Real Workload)抽象化 方法 参数的取值 均值averaging：数据变化范围大时？ 指定方差specifying dispersion 参数柱状图表示 多参数的图形表示：可描述参数之间的关系 参数的个数 取最大权重法 取实际负载中元素权重最大的前n个元素 元素聚类法 聚合属性相似的负载元素 负载模拟中的相关概念 模型负载：从现实世界中抽取的可供研究的负载信息集合； 负载元素：一个负载中的各种信息，包括：程序、事务、请求、数据等； 模拟度：模拟负载对实际负载的复现程度[0-1]。0：失败；1：完全精确 元素权重：每个元素的复现对整个负载复现的影响程度； 模拟精度：实际负载中的某个元素在模拟负载中的复杂程度； 生成模拟负载的八个阶段 性能评测涉及的主要内容 负载workload、基准程序Benchmark 性能指标performance metrics 分析analysis 模拟simulation 测量measurement 监控Monitor 优化Optimization 性能指标的提取 性能指标的分类 可靠性、可利用性 能够持续工作的时间长度，如：平均无故障时间 处理能力或效率 吞吐率：系统在单位时间内能处理正常作业的个数； 响应时间：系统得到输入到给出输出之间的时间 利用率：给定时间区间中，系统各种部件被使用的时间与整个时间之比； 常用的性能指标commonly used performance metrics 响应时间（Response time） 常用的性能指标（续）commonly used performance metrics 吞吐率（Throughput） 单位时间内系统处理请求的个数 利用率（utilization） 一段时间内系统服务于请求的时间比例 可靠性（rali