管理研究有效性.pptVIP

多属性－多方法矩阵说明 评价差别有效性需要进行三种比较： （1）有效性对角③中的相关系数应该大于异方法三角形④中处于同行或同列的相关系数。它表明对同一属性用不同方法进行的度量结果间的相关关系应该高于属性和方法都不相同的两个度量之间的相关关系。这是最起码的要求，图中的数据满足了这个条件。 （2）有效性对角③中的相关系数应该高于异属性－同方法三角形②中的相关系数，这表明用不同方法对同一属性的度量间的相关程度必须高于用同种方法对不同属性的度量间的相关程度。这是一个更加严格的要求，图中数据满足这个要求。 （3）所有的异属性－同方法三角形②和异方法三角形④中的相关关系模式应该相同。这可以通过在每个异属性三角形中对相关系数进行排序检查。图中的数据基本满足这个要求。每个异属性三角形中，相关系数的符号模式一致，相关系数的大小顺序也基本一致。 * 基于预期的概念建构有效性评价 概念建构有效性也可以通过判断度量的结果是否与根据有关理论等对概念所做出的预期之间的一致性来评价。 概念建构的维度有效性评价 可以使用因子分析（因子分析是用少数几个可观测随机变量描述不可观测的假设变量之间的协方差关系的数学方法）等方法对度量结果进行分析，如果发现由可观测变量度量的维度与理论上概念的维度一致，则说明度量具有维度有效性。 * 维度有效性评价举例 为了考察学生在阅读理解、数学抽象思维和艺术形象思维等方面的能力，给出一份包括50道题的试卷。阅读理解、数学抽象思维和艺术形象思维能力是不能直接观测的，而对试卷中每道题回答的成绩是可观测的。将对每道题回答的成绩作为一个可观测变量，如果分析表明这些成绩能够反映想要测度的阅读理解、数学抽象思维和艺术形象思维能力，则认为这种考试具有维度有效性。 * 概念建构的相关标准有效性评价 分析度量中使用的可观测变量与要预测的标准变量之间的关系，如果发现在度量变量与要预测的标准变量之间存在较高的相关关系，则该度量具有相关标准有效性。 例如，研究生入学考试是为了选拔培养具有创新能力的研究人才，设置了数学、英语、专业基础和专业课程等考试科目。如果分析表明某科目的入学成绩与学生入学后的学习能力、研究能力或毕业后的开拓创新能力之间有较高的相关关系，可以证明该科目考试具有较高的相关标准有效性。 * 概念建构的理论有效性评价 会聚有效性和差别有效性只能说明不同方法测量的是同一或不同概念，不能保证这个概念就是希望测量的概念。度量同一概念且具有高相关性的不同方法所度量的可能不是所希望度量的概念，而是另一个无关概念。 概念建构涉及问题的界定、概念定义和概念域界定等理论层次，一种理论的建构通常需要其它理论的支持。我们可以把希望度量的概念与其它多个概念相联系，并且引入已被仔细考察的理论和假设推演出概念之间的相互关系，通过比较理论层次和经验层次的关系模式，考察度量结果与理论推演结果的一致性来检验概念建构有效性。 * 理论有效性 * 理论有效性评价的逻辑结构 概念建构理论有效性检验在逻辑上是基于以下四个独立假设： ① 概念A与概念B具有相关关系； ② 变量a是对概念A的有效度量； ③ 变量b是对概念B的有效度量； ④ 变量a与变量b相关； 其中只有假设④是能直接被经验数据所证明的。要论证变量a是否是对概念A的有效度量，就必须假定假设①与假设③是正确的，即变量b是对概念B的有效度量，而且概念A与概念B之间的相关关系是真实存在的。这种检验方法将对概念建构有效性的验证与整个理论的发展和证明结合了起来。 * 影响概念建构有效性的因素 影响概念建构有效性的主要因素有： 操作化前对概念的不适当界定； 操作化过程中操作变量选择的不适当； 单一操作方法（或变量）的偏差； 单一度量项目的偏差； 对概念之间的非线性关系缺乏认识或处理不当而作不适当的线性外推； 调查过程中被调查者对问题的错误理解； 要提高概念建构有效性，需要对整个研究进行过程控制，在每一个环节注意避免和减少系统误差和随机误差。 * 提高概念建构有效性的过程控制方法 * 提高概念建构有效性的要点 在操作化之前对概念的界定要清楚，这是进行有效研究的前提。 采用多项目度量方法，即采用多个变量度量同一概念，这种方法也称为操作多元化。操作多元化有助于克服单项目度量存在的度量项目与被测概念之间相关度可能较低而与其它概念则可能会有一定的相关性的弱点，并且能更精细地划分待测概念的属性，提高度量精度和度量的可靠性。 重视统计口径的统一、数据的可比性、数据收集方法设计和具体实施过程的科学性和严格性，以保证获得高质量的信息。 * 二、内部有效性 因果关系 因果关系是指一个概念的变化引起另一个概念的变化，作为原因的变量称为自变量（independent variable），作为结果的变量称为因变量（dependent variabl