第11讲 素质测评的质量分析.pptxVIP

第11讲 素质测评的质量分析;本讲内容;效度;结构效度;结构效度;要定义或建构一个素质的结构模型，可以从以下几方面着手： 首先，采取工作分析方法，对所想测评的素质进行结构分析及行为分析，确定各种素质结构及其代表的行为。 其次，用图表的形式逐一列出工作分析得到的素质因素及其特征行为。除此之外，还可以通过查找历史上或现在人们对所测评素质的模型的现成资料，丰富已有分析的结果。 再次，还要另外准备一份与已经建构的模型可能混淆的但关系密切的其他模型图表。要反问自己并向人说明为什么所测素质是你所定义的结构模型而不是其他别的结构模型。 ;2.收集事实资料，评判结构效度，具体方法有： 排除法 如果测评结果能明确的排除它所对应素质结构模型的其他解释，那就表明所获得的测评结果具有较好的结构效度。 咨询法 可以请一些有经验的专家就你所获得的测评结果、所对应的素质结构进行判断或推断，问他们该测评结果实际测评的素质是什么。如果大家的回答及你所想测评的素质结构几乎一致，那么说明你的测评有较好的结构效度。 相关法 找一个具有较高结构效度的测评工具或结果，与你所获得的测评结果进行相关性分析，如果相关性很高，说明你的测评结果具有较高的结构效度。 例如：某一个具有“自尊”结构效度的测评量表，它的测评结果就应该与自信、社交能力及领导作用等测评量表的测评结果成正比，而与诸如内向性、自卑、孤独等测评量表测评的结果成反比。 ;逻辑分析法 当大家对所测素质的结构模型具有比较一致的认识时，只要能判定测评内容（工具）选择正确，且整个测评过程除了一切外来干扰因素，就可以说测评结果具有较好的结构效度。 例如：测评时间足以保证被测评者完成所有的工作，被测评者没有受到催促因素的影响；测评工具的指导十分明确，被测操作准确。 多元分析 多元分析就是采取聚类分析及主成分分析等数学手段，对测评结果进行分析，看分析的结果。 例如：所找出的主要因素与分类结果与所想测评素质的结构是否一致，如果一致，则说明所获得的测评记过具有较好的结构效度。 ;关联效度;关联效度;效度分析中的几个理论问题;Ｍｅｓｓｉｃｋ以建构效度概念为中心,提出了检验测验效度的四个层面(渐进矩阵)。;结构效度概念产生后第二年,Ｌ.Ｊ.Ｃｒｏｎｂａｃｈ和Ｐ.Ｅ.Ｍｅｅｈｌ提出了5种验证方法,即分组区分法、相关矩阵及因素分析法、内部结构研究、不同场合下的变化研究、过程研究。 DeborahLee提到,效度指的是一个测验准确测量它所要测的东西的能力,包括内容效度、效标关联效度和结构效度。 张厚粲、孙晓敏、王晶、叶映华、郑全全对效度概念演进及其新发展进行了研究。张厚粲、孙晓敏（孙晓敏、张厚粲，2004）回顾了心理测量学中效度概念发展的三个阶段,早期效度概念关注的是两个变量之间的相关.随后重点转向效度的多种类型,现阶段则注重考察测验的构想效度。总之,效度确证成为一个持续不断的动态过程;在这个过程中,运用各种技术不断地评价、质疑和检查由测验分数所作推论和解释的有效性成为心理与教育测量研究中不可或缺的组成部分。;关于结构效度的研究;效度应用;信度;再测信度;复本信度;一致性信度;评分者信度;速度测验的信度;信度多高才算可靠 ;各种信度系数应用 ;项目分析;项目分析;其他指标的分析;其他指标的分析;;;谢谢大家!