心理测量学知识.ppt

信度与测验分数的解释 解释真实分数与实得分数的相关。 确定信度可以接受的水平。 ＜0.7：测验不能用于对个人作出评价或预测，且不能团体比较。 0.7~0.85：可用于团体比较。 ＞0.85：才能用来鉴别或预测个人成绩或作为。 解释个人分数的意义。 估计真实分数的范围 真实分数95%的置信区间：X±1.96SE 了解实得分数再测时可能的变化情形 比较不同测验分数的差异。 第三十页，共七十七页，2022年，8月28日 影响信度的因素 样本的特征： 样本团体异质性的影响 若获得信度的取样团体较为异质的话，往往会高估测验的信度。 样本团体平均能力水平的影响 对于不同水平的团体，题目的难度会影响信度系数。 测验的长度 一般来说，长度越长，信度越高。 斯皮尔曼-布朗公式（例题） 测验的难度 时间间隔 时间间隔越短，信度系数越大 第三十一页，共七十七页，2022年，8月28日 第四节 测验的效度 效度：所测量的与所要测量的心理特点之间符合的程度，即心理测验的准确性。真实方差与总方差的比率。效度除受随机误差影响外，还受系统误差的影响。 信度与效度的关系 信度是效度的必要条件 信度制约效度 效度的性质 相对性 故在评鉴效度时必须考虑测验的目的与功能 连续性 效度的高或低而无“有效”或“无效” 第三十二页，共七十七页，2022年，8月28日 效度评估的方法 内容效度:是测验题目对有关内容或行为取样的适用性，从而确定测验是否是所欲测量的行为领域的代表性取样。 专家判断法（逻辑效度） 统计分析法 A、计算评分者信度??????? B、计算复本信度?????? C、再测法 经验推测法 构想效度：是指测验能够测量到理论上的构想或特质的程度，即测验的结果是否能证实或解释某一理论的假设、术语或构想。 对测验本身的分析（A、测验的内容效度??? B、测验的内部一致性指标 C、分析受测者对题目的反应特点） 测验间的互相比较 效标效度的研究证明 实验法和观察法证实 效标效度（实证效度）：在实践中检验测验预测个体在某种情境下行为表现的有效性程度。 相关法、区分法、命中率法 第三十三页，共七十七页，2022年，8月28日 效度的功能 预测误差 预测效标分数 预测效率指数 影响效度的因素 测验本身的因素 测验实施中的干扰因素：主试、被试、情境等。 样本团体的性质：越异质，效度越高 效标的性质 第三十四页，共七十七页，2022年，8月28日 第五节 项目分析 定性分析 定量分析 难度 项目分析 内容效度 题目恰当性 题目有效性 区分度 第三十五页，共七十七页，2022年，8月28日 项目的难度 定义：指项目的难易程度。在能力测验中通常需要一个反映难度水平的指标，在非能力测验（如人格测验）中，类似的指标是“通俗性”。难度通常以通过率表示，用P值代表。P值越大，难度越低。项目难度以使测验分数形成常态分布为好。 难度水平的确定 P值越接近0.5，区别力越高。 平均难度宜在0.5 ，而各题难度在0.5± 0.20之间 第三十六页，共七十七页，2022年，8月28日 例 题 在100名学生中，答对某题的人数为80人，则该题的难度为（ ） 某题满分为10分，该题考生的平均分为8分，则该题的难度为（ ） 在350分被试者中，选为高分组和低分组的被试者各有100人，其中高分组80人答对第2题，低分组有40人答对第2题，则第2题的难度为（ ） 第三十七页，共七十七页，2022年，8月28日 项目的区分度（鉴别力） 区分度：是指测验项目对被试者的心理特性的区分能力。 区分度的范围介于-1到1之间。 计算方法： 鉴别指数：D=PH-PL 表5-6 项目鉴别指数与评价标准。 D＞0.40：好； D＜ 0.19：差，淘汰 相关法 表5-7 D的最大值与项目难度的关系。 难度高的项目对高水平的被试者区分度高，难度低的项目对低水平的被试者区分度高。 第三十八页，共七十七页，2022年，8月28日 第六节 测验编制的一般程序 测验项目的分析 测验的对象：年龄、受教育程度、 社会经济水平、阅读水平 测验的用途：描述、诊断、选拔、预测 测验的目标：编制的测验是测什么的 （心理测验的目标分析：A、工作分析? B、对特定概念下 定义 ?C、确定测验的具体内容 测题的编写