PT2010之四（CTT与信度） 心理与教育测量 教学课件.ppt

心理测量原理2010之四CTT与信度——心理测量原理之二 （2） 王才康 华南师大心理系 2010-3-29 本章内容 测量误差：概念、种类、来源 CTT与相关假设 信度 概念 评估方法 如何提高测验信度 心理测验的编制过程 确定测验的目的 制定编题计划 设计测试题目 试测与项目分析 合成测验 将测验标准化 对测验的鉴定（信度与效度） 编写测验说明书 测量误差（1） 测量误差的含义 测量误差的种类 随机误差 系统误差 两类测量误差 测量误差（2） 测量误差的来源 测量工具 测量对象 测量过程 CTT的数学模型 X=T+E 这里 X为观察值 T为真分数 E为误差 CTT的公理假设 The average error score in the population of examinees is zero.（多次测量的误差平均数为，反过来即多次测量的平均数为T） True scores and error scores are uncorrelated.（真分数与误差分数之间的相关为零） Error scores on parallel tests are uncorrelated.（各平行测验的误差分数之间的相关为零） CTT进一步推理 平行测验 一人多次测验相当于多人一次测验（P43），因而CTT理论可用一个样本的测验 方差分割（P44）： S2X =S2T + S2E S2T =S2v + S2I （考虑到系统误差I） S2X =S2v + S2I+ S2E CTT理论的应用 项目难度 项目与总分相关（区分度） 信度 测量的标准误SE 效度？ CTT理论的优缺点 优点： 简单易懂 计算方便？？？ 缺点： 样本依赖 信度：概念与作用 定义： 测量（工具）的可靠性或稳定性程度，也是不受各种误差（随机误差）影响的程度 信度公式：rxx= S2T/S2X 或 rxx=1-S2E/S2X 作用： 反映随机误差的的大小 解释个人测量分数SE（P47 ，4.4）Therefore, for a student who received score?X, a 68 percent confidence interval for his or her true score is?X?±1(σE). 比较不同测验分数 信度：评估方法 重测信度：同一测验先后测试两次 样本？ 注意两次间隔时间 复本信度：两个同质性测验先后测试两次 折半信度：一个测验，统计时折半分析 内在一致性信度，（a系数）： 一个测验测一次 评分者信度：一个测验，有两个或多个评分者进行评分 信度：统计方法 重测信度：相关系数 复本信度：相关系数 折半信度：相关系数rhh ,rxx=2rhh/（1+rhh） 内在一致性信度： Cronbach’s coefficient-α, Kuder-Richardson’s KR-20 适合分类数据，但一般不用 评分者信度：W系数， α系数（？？？） 信度：标准p57 认知测验：0.90 分半信度 重测信度 人格测验：0.80 内在一致性信度 重测信度 信度的含义：与随机误差的关系 重测信度：时间，环境，被试状态 复本信度：两个测验之间的差异，时间等 折半信度：粗略的项目之间的差异p51 内在一致性信度，（a系数）：项目之间差异 评分者信度：评分者的主观偏差等 提高测量信度的方法（1） 影响因素 被试 主试 情境 工具（测验）：测验项目长度 时间间隔 提高方法 适当增加测验长度 项目难度接近正态 提高项目的区分度 取样：根据测验目的选择被试 测验过程标准化 提高测量信度的方法（2） 可以从减少误差角度（或误差的来源）来看 三个误差来源： 测验本身：可以增加项目（测验长度） 重测信度：题目简单明了，有确定的含义（没有歧义）。时间间隔不要太长 内在一致性信度：注意项目在反映内在概念上的一致性 测验情境、主试 被试状态 第四个因素：样本（测量误差）： 有代表性，即能反映总体 有足够的样本容量 思考题 重要概念 系统误差、随机误差 真分数理论 信度、重测信度、内在一致性信度、评分者信度、测量的标准误SE 思考题： 试述CTT理论的基本思想？ 试述两类测量误差的特点？ 试述重测信度（或内在一致性信度）的含义？ 试述重测信度（或内在一致性信度）的评估步骤？ 试述提高测量信度的方法？ * *