第四讲 测验的效度 心理测量学教学课件.ppt

第四讲 测验的效度 一、效度的基本定义 二、效度的主要类别 三、内容效度 四、结构效度(构想效度) 五、准则关联效度(效标关联效度) 六、效度与信度的关系 七、影响效度的主要因素（参考教材） 八、简论如何提高测验的效度（作业） 九、效度的应用（自学） 一、测验效度的基本定义 效度(validity)是一个测验能实际测量出其所要测量的心理特性或功能的程度。 也可以说是测量结果能够反映所要测量的特性或功能水平的程度。 测验效度很低的测验就是“测非所需”、“张冠李戴” 二、测验效度的主要类别 1966年，弗伦奇 (French)和米歇尔(Michbel)根据测验目的的不同，把效度分为： 内容效度 结构效度 效标关联效度 预测效度 同时效度 1974年，美国心理学会采纳了这种分类意见。 三、内容效度(content validity) 内容效度是指测验的测题对整个测验内容范围的代表性程度。 心理测验是要根据测题收集到的被试的行为样本，对被试的某种心理属性或特质的水平作出评定。 反映被试某种心理属性或特质水平的情境和行为表现多种多样。 测验的整个内容范围就是指这些情境和行为表现。 如何理解内容效度？ 如何分析内容效度？ 一般心理测验 学科成绩测验 如何理解测验的内容效度 学科成绩测验的内容效度： 测验题目领域类别的分数比例，与课程教学计划所要求的知识和能力领域分布比例是否一致？练习 测验考察的各种能力层次的分数分布，是否与学科教学目标的层次要求相一致。练习 智力测验的内容效度： 测验的项目和题目是否比较全面地考察了公认的智力行为类别。 如果公认的智力行为表现有10个方面，某智力测验只含3个方面的题目。该测验的内容效度高吗？ 内容效度分析练习一 根据《中国历史》课程的教学时数比例和对测验的命题要求要求，分析哪个测验的内容效度较好？ 内容效度分析练习二 根据测验对各层次目标的命题要求，试分析哪份试卷的内容效度较高？ 如何分析和提高一般心理测验的内容效度？ 明确所要测量的心理属性或特质的表现情境和行为的各种类别。[智力行为类别] 按照情境和行为类别，分别其编制测验题目 请一些专家对测题逐个进行判断、归类。 判断该测题是否可以测量所要测的心理属性。 将判断为有效的测题归类。 分析每类的测题数量是否充足。 分析各类测题的数量是否均衡。 韦克斯勒儿童智力量表的项目1-6 1.常识(是什么，怎么办)：30个题目 2.类同(概括共同点)：17组配对词，概括相似之处; 3.算术(心算)：18个测题，要求心算; 4.词汇理解(解释)：解释32个词; 5.理解(解释常见的现象与做法)：17个测试题，如为什么寄信要贴邮票？ 6.数字记忆广度(短时记忆)： 呈现一系列数字，要求顺背和倒背. 韦克斯勒儿童智力量表的项目7-12 7.图画补缺(分析)：说出未完成图画上缺失部分名称； 8.图片排列(关系理解与判断)：将无序的图片排序，表示一个故事; 9.积木图案(观察、记忆)：按交给的样子，用积木摆出图案； 10.拼组物体(综合)：用几个图形板拼成物体或人物。 11.译码：按照所给的样子，把符号填入相应数字(或图形)的下面，既要正确又要迅速。 *12.走迷津：用铅笔正确地找出出路。 如何分析学科成绩测验的内容效度？ 明确测验命题的内容和掌握层次要求 对测验题目进行分析、归类； 对测验题目的分值按类别进行统计； 将测验题目分值的统计结果与命题要求做比较。 1、明确测验命题的内容和掌握层次要求 课程A期中测验双向细目表 2、对测验题目进行分析分析、归类 命题者或者请其他专家对初步形成的测验试卷的题目，逐个进行判断，确定其所属的内容领域、章节及学习要求层次？ 例如，对《心理学史》测验中的题目“实验心理学的创始人是( )”归类： 第一章 识记 3、对测验题目的分值按类别进行统计 课程A期中测验试题分布统计 四、结构效度(construct validity) 什么是结构效度（构想效度）? 指测验结果能说明某些理论或假设的程度，或 某些理论或假设能够解释测验结果的恰当程度. 如果测验结果能验证某些理论或假设成立，那么，这个测验就具有一定的结构效度。 如果测验结果无法用所测心理属性的相关理论或假设进行解释，那么,该测验就缺乏结构效度. 如何估计结构效度？ 如何分析结构效度？ 结构效度没有单一的统计指标！对于不同的心理测验，可依据相应的理论或假设，用相应的统计方法来分析。 均数比较：独立样本t检验、z检验、单因素方差分析 组间鉴别效度：区分不同水平群组之间差异的程度 测验间的相关分析：积差相关分析 相容效度、会聚效度、求同效度 区分效度、求异效度 因素分析（因子分析）：一种多元统计方法 对测题按相关程度进行统计归类,看测题是否符