效能评估方法综述.docxVIP

效能评估方法综述 作者：安娜张明左延智 来源：《计算机与网络》2021年第18期 针对复杂网络和多样化业务对网络效能和健康度提出的高要求，总结了几种典型的效能评 估方法，包括层次分析法、模糊综合评判法、模块分析法和嫡值法，对比分析了各种效能评估 方法的优缺点：层次分析法适合指标体系分层，模糊综合分析法适合大系统的综合评估，模块 分析法适合软件模块，嫡值法适合评判准则客观性较强的评估。在具体应用过程中，根据实际 需要选择合适的评估算法或者将评估算法组合运用。 通信网的效能评估研究始于60年代，70年代才开始受到重视。由于通信网的效能评估研 究是一个复杂而且范围广泛的课题，迄今为止尚未形成公认的标准。从已有的大量文献资料来 看，目前通信网效能评估的研究大都是将通信网抽象为一个由节点和链路组成的图形，利用数 学模型，从不同角度出发，建立或选择不同的评估指标体系开展效能评估研究，并已取得了大 量的成果。 下面对比分析几种常见的典型效能评估方法，针对每种方法的优缺点进行对比。 层次分析法 系统效能评估和分析方法包括很多种，层次分析法是其中之一，层次分析法是一种集人的 主观认知和客观实际数据相结合的评估方法。一般针对复杂巨系统进行分析评估：首先将复杂 问题分解分层，划分为第一阶层，如果第一阶层的因素仍然复杂，可以继续分解，分解为第二 阶层第三阶层，直到各层因素单一不可分。因此确定每个评估元素的重要性权值是层次分析法 的核心点和关键点，矩阵中每一个元素的重要性代表了人们对评估元素相对重要性（和优劣、 强度等）的排序，一般采用自然数1~9及其倒数的标度方法。 通过层次分析法确定各评估元素的相对重要程度，即比较2个元素和，确定2个值，，引 入1~9比率标度， ，的确定依据如下原则：（假定w的相对值为1）①当2个元素和同等重要时，==1； 当元素比另—元素略微重要时，=3 ；③当元素比另—元素重要时，=5 ； ④当元素比另— 元素很重要时，=7 ；⑤当元素比另— 元素j绝对重要时，=9 ； =2, 4, 6, 8是介于上述情况的中间取值。 第一步将系统分解为不可再分的因素；第二步，确定每一层因素的权重，可以通过两两比 较判断的方式确定，权重系数小于1,权重系数之和等于1。 在确定评判矩阵的过程中’要确保评估的科学性和正确 性，形成比较判断矩阵P.矩阵的 当?育 元素燃后对该矩阵 求特征值■其最大特征值人响所对应的店征向量,即为权重向 鼠3二｛3 m 3 ，一.…3仍，目一工叫=1 Q 模糊综合评判法 通常系统效能评估一般划分为宏观的几大能力，其中每个大的评估能力又可以细分为具体 的能力指标，同时具体的能力指标根据需要还可以进一步细化为更多层指标，通常单个评估指 标只代表整个系统效能的一个维度，因此通过单一指标进行系统效能评估缺乏全面性和整体 性。 模糊综合评判法有2个要素；一是模糊，二是综合。模糊强调的是评估环境是模糊的，综 合一是指待评估系统受到多种因素影响和制约，二是做出一个总体综合评价，是一种十分有效 的模糊多因素综合评估决策方法，模糊综合评判通常包括6个基本评估步骤： 由各评判因素组成评估指标体系； 通过分级评语形成评判等级论域； 进行单因素评价，由单因素评价结果组成模糊综合评判矩阵； 通过被评估对象中相对重要程度，形成权重向量集； 由权重向量集与综合评判矩阵合成为模糊算子； ⑦通过评判结果向量生成综合评判向量。 嫡值法 嫡值法是一种客观赋权方法，借鉴了信息嫡思想，通过计算指标的信息嫡，根据指标的相 对变化程度对系统整体的影响来决定指标的权重，即根据各个指标标志值的差异程度来进行赋 权，从而得出各个指标相应的权重，相对变化程度大的指标具有较大的权重嫡越大说明系统越 混乱，携带的信息越少，权重越小；嫡越小说明系统越有序，携带的信息越多，权重越大嫡值 法优点更突出： 无量纲化方法得当，由于嫡权法采用的是归一法，这种方法具有鲁棒性强、单调性好 数据信息恒定和缩放无关性等优点； 嫡权法根据客观真实的数据，运用差异驱动原理尝试求得最佳权重，力求全面真实地反 映指标数据所包含的信息； 赋权过程具有很高的信度和效度。 模块分析法 模块分析法的步骤如下： 将软件分解为模块； 建立每个模块的可靠性增长模型； 确定每个模块的模型参数； 进行可靠性叠加； 在系统测试中验证与修正可靠性增长模型参数。 在设计阶段，软件通常被按照功能或体系架构分解为多个模块，如果想求出整个软件系统 的可靠性，可以通过求解每个软件模块的可靠性，进而获得整个软件的可靠性。对于管理类软 件可以将一个软件系统分解为数据采集模块、数据处理模块以及前台呈现模块等多个功能模 块。对于分布式软件系统，由于软件部署运行在多个计算机上，因此将软件分解为运行在不同 计算机上的独立模块。网络管理软件一般分