第2章-2 教育测量与评价的质量特性—效度.pptVIP

教育测量与评价 本章内容提要： 教育测量与评价的信度 教育测量与评价的效度 教育测量与评价的难度 教育测量与评价的区分度 第二节 教育与心理测量的效度 效度的理论意义 效度的统计学意义 效度与信度的关系 效标关联效度及其估算方法 内容效度及其分析方法 结构效度及其分析方法 一、效度的理论意义 效度指一次测量的有效程度。 效度指一次测验对其所欲测量的属性能够测量到的程度，即测量的正确性。 效度是指测验所测量到的结果与测验编制者想要测量的心理特性之间的一致性程度。 说明： 效度始终是针对一定测量目的而言的。 效度只是程度上的差异。 效度是针对测量结果而言的。 评价效度需要多角度、多方面的收集证据。 二、效度的统计学意义 公式推导： 公式推导： 效度的统计学意义为： 三、信度与效度之间的关系 四、效标关联效度及其估算方法 何为效标？ 所谓效标，是检验测验效度的参照标准，效标实际上是本测验说想测量或要预测的特性或功能，这些特性和功能通常以另一独立测验结果来表示。 优良效标的标准 可靠性 有效性 客观性 实用性 （一）定义： 以测验分数与其效标分数之间的相关来表示测验的效度。又称之为统计效度或实证效度，二者之间的相关系数就是效标关联效度系数。 （二）估算方法 积差相关法 二列相关法 点二列相关法 等级相关法 四分相关法及 相关法 列联相关法 命中率法 显著差异法 积差相关法 二列相关法 点二列相关法 等级相关法（斯皮尔曼等级相关） 四分相关法及 相关法 【举例说明】 42名学生大学考试数学成绩（优和良）与修业四年后，研究生入学考试数学成绩（通过和未通过）如下表所示，试估计研究生入学考试数学试卷的效标关联效度系数。 表 42名大学生及研究生入学考试数学成绩 列联相关法 【举例说明】 初三137名学生性向测验及高一物理学科成绩如下表所示，试估计学生性向测验的预测性效标关联效度。 表 初三学生性向测验与高一物理学科成绩 命中率法 总命中率 正命中率 负命中率 显著差异法 根据效标将被试分为两个极端组（如：好与差、成功与失败），然后检验两组测验分数是否具有统计学上的显著性差异。 使用相关系数表示效度时，可以采用以下参照标准来解释效度： 五、内容效度及其分析方法 （一）定义 内容效度就是指测验内容对所要测量的内容的代表性程度，也指测验内容与要测内容之间的一致性程度。 说明： 这种代表性程度表现为测验的内容范围、材料与所要测量的内容范围、教育目标是否相等，测量试题所引起的行为是不是所要测量属性的明确反应，测量结果是不是一个具有代表性的行为样本，等等。 内容效度一般用于考查学生学业成绩测验的有效性，而不适合应用于心理测验。 说明： 内容效度的确定方法与效标关联效度不同，它一般不能用数量化的指标来反映测验内容的有效性程度，而是在某种依据的基础上作出逻辑判断。 对于测验内容效度的分析，要以对所要测量的内容范围和教育目标系统的逻辑分析为基础，要以这些内容范围和教育目标层次所占的比重为依据来考察测验是否按比重覆盖了目标内容。 （二）内容效度的建立过程 （三）内容效度的分析方法 逻辑分析法 量化分析法 比较差异法 逻辑分析法 将实际测验题目分析所得的“题目双向分类表”与事先制定的“命题双向细目表”进行比较分析，由专家对考试内容的一致性和有效性作出评价。 某初中化学测验命题双向细目表 量化分析法 比较差异法 对同一组被试用一个测验的两个复本在某一学科（内容）教学训练前后分别进行测验，若两次测验成绩差异显著，且教学训练后优于教学训练前，则表明所测验内容与教学内容或训练内容相符，具有较好的内容效度；否则，则可说明内容效度较低。 六、结构效度及其分析方法 （一）定义 结构效度是指测验成绩能够解释心理学理论上的某种结构或特质的程度。 图 初中生自主学习能力结构——自主学习策略 【实例】少年道德品质形成原因， 提出几点理论假设： 少年道德品质倾向与家庭因素有密切关系； 少年道德品质倾向与居住地区和环境有关系； 少年道德品质倾向与学校教育有关系； 少年道德品质倾向与他们在校内外结交朋友有关系。 （二）确定结构效度的步骤和方法 举例说明：某智力测验 首先根据有关智力理论建立一套理论结构，如智力的定义、智力的结构、智力与遗传环境的关系、智力与年龄的关系等； 然后根据这些理论，提出有关智力测验的假设，如：①测验分数在16岁以前随年龄的增加而增加；②智力测验受教学测直接影响不大；③一种智力测验的分数与其他智力测验的分数有正相关；④智商是相对稳定的等等。 最后通过搜集材料（这里主要指通过智力