信息系统评价方法简介.docVIP

信息系统评估方法介绍 　 重大专项研发部 张跃军 　2010-03-18 ????随着信息革命的不断推进,整个 HYPERLINK /magazine/1002-9656 世界各领域的信息呈现出了日趋激烈的爆炸式增长,为了管理及利用这些信息,各个领域都出现了许多功能多样的信息系统,并且随着信息的膨胀,这些系统也在不断地趋于复杂化。这种情况下,系统在规定条件下和规定时间内完成规定任务的程度就成了一个很重要的问题,因此系统的效能就是对系统所具有能达到规定任务要求能力的度量。系统评估是研究系统的效能特性及其获取系统最大效能的一门科学。系统效能是完全不同于费效比以及性能的一个独立概念。系统费效比是指费用与效果的比值,反映出系统的投入与产出的比例关系;系统性能是指系统能够发挥表现出的处理能力。而系统的效能不仅是其所具有的内在的执行任务的能力,而且是在系统的全寿命周期中围绕系统的一些活动所取得的效果,也称之为系统的效能。因此系统效能评估是对系统的标称能力与实际能力匹配程度的全面评估。通过对复杂信息系统进行效能评估,可以量化系统标称能力与实际能力的匹配程度,发现系统现状与实际使用需求之间的差距。这些量化后得到的差距 HYPERLINK /magazine/1006-5954 数据就可以为系统需求的改进和后续系统的规划、设计、运行、管理和维护提供有力的理论基础;同时这些数据也为系统运行、管理和使用提供了参考模型,为系统日常维护和状态监控指明了关注要点和改进方向。对这些复杂信息系统进行效能评估之后,就能有针对性地逐步优化系统的体系结构和配置,提高系统的运行管理水平,以需求为向导显著提高系统的运行效益。 ????评估方法有广义和狭义两种概念，广义概念包括评估准备、评估设计、信息获取、评估分析与综合、撰写评估报告等评估活动全过程的方法，狭义概念特指评估分析与综合的方法，本文中所提到的评估方法为狭义概念。 1评估方法的选择和应用 ????选择评估方法时，评估者应首先在成熟、公认的方法中进行恰当的选择，如果由于评估活动的特殊性，没有采用成熟、公认的方法，必须在评估报告中加以说明。 1.1评估目的与评方法的匹配 ????评估方法是实现评估目的技术手段，评估目的与方法的匹配时体现评估科学性的重要方面，正确理解和认识这匹配关系是正确选择评估方法的基本前提。评估的实践表明，评估目的与评估方法之间的匹配关系，并不是说评估的特定目的与特定一种评估方法之间的一一对应，而是指对于特定的评估目的，选择高效、相对准确合理的评估方法。 1.2评估方法的合理替代 ????由于客观条件的限制，以及各种评估方法对于实现评估目标的相对合理性，有经验的评估者必须了解评估方法的合理替代原则。 首先考虑评估方法的内在约束，考虑不同方法的评估角度和评估途径，例如：对于大型计划的绩效评估，原型案例研究法和数理统计方法在一定条件下可以相互替代：除了受内在约束外，评估方法的选择和替代还有受外界的制约，包括可以获得的信息、用户的理解和接受程度及掌握方法的难度等。 1.3“内在约束优先”的原则 ????不论是评估方法的选用还是合理替代，都应遵循“内在约束优先”的原则。所谓“内在约束优先”的主要概念是：评估的选择应该首先考虑评估活动自身的因素及其对评估方法应用的影响，这些影响形成了评估方法选择的内在约束。例如：目标约束是评估方法选择的最重要的内在约束，如果评估活动的目的在于帮助投资者在一批申请项目中进行筛选，通常可采用多指标综合评估方法进行分类排序；如果评估活动的目的是回答某些质疑，可采用问题诊断的指标框架和典型案例研究的评估方法。 1.3.1定性和定量方法相结合 ????定性和定量方法相结合是评估方法应用的基本思路，然而在实践中如何具体实现定性和定量方法的结合目前尚无一定之规。 1.3.2定性信息结构化 ????评估中虽然收集了大量的定量信息，但定性信息仍然是重要的，包括各种文件、管理规范、各类总结材料、已有的评估论证报告及调研会议记录以及调查问卷中的开放性问题等。评估者可以对定性信息进行收集、加工和整理，将定性信息进行重新编码，是其结构化。 1.3.3结构化面访 ????结构化面访是评估中常用的一种调查方法。根据统一设计的面访提纲和问卷，采用多项选择的问答方式，分头进行面访调查，所得的调查信息具有相同的结构形式，使定性信息结构化。 1.3.4定性—定量信息的相互转换 ????在表达评估结果时，可以根据需要进行定性一定量信息的转换转换。评估结论的表达方式取决于表达的内容以及用户的要求。有时将定性问题定量化处理后表达比较明确，有时用定性语言概况表达定量结果更为适宜，有时则需要两者同时使用。 2比较研究 ????比较研究是评估的基本方法之一，也是评估活动的基本思维框架。比较研究评估方法可以进行前后对