心理测量学课件_第3节测验的信度.pptVIP

信度概念 信度的评估方法 信度与测验分数的解释 影响信度的因素 第一单元 　信度的概念 Classical Test Theory（CTT） （一）测量误差 2、误差的种类 随机误差与系统误差的比较 3、误差来源 （二）基本假设与真分数 2、基本假设 例2-1：某一物理测量结果（单位：微） 二、信度的概念 （一）信度的定义? 2、操作定义 3、rXX值与测验误差的关系 （二）信度的指标1、信度系数与信度指数 2、测验标准误 缘由：rXX 只反映X与T的符合程度 未反映个体测验分数的变异 测量标准误 测量误差分数分布的标准差 公式 第二单元 信度评估的方法 一、重测信度 二、复本信度 三、重测复本信度 三、内部一致性信度 （一）分半信度 2、校正方法 （二）同质信度 四、评分者信度 （二）肯德尔和谐系数 K个评价者评N个被评者或作品 第三单元 信度与测验分数的解释 真分数与实得分数相关的解释 信度系数和信度指数 测量标准误 信度的评价 间接解释范例 例2-13：设有两平等的创造力测验 （A和B）。现： 1）间隔两月施测100人，其信度为0.70； 2）两卷分半信度校正值为0.80； 3）第2个评分者随机抽50份，信度0.92； 试问： 1）真分数的方差是多少？ 2）各种信度的误差是多少？ 分析结果 （二）测量标准误 用途 衡量测量值（X）与测量对象真值（T）的偏离程度的一种指标 用来估计个人的真分数 个人分数的误差 rXX越大：变化的可能性越小 rXX = 1：完全不变化 表2-12 用rXX与SX估计测量标准误 二、确定信度可接受水平 典型测验的一般标准 典型测验的信度高低水平 三、解释个人分数的意义 公式  表2-9 某生测验真分数的信度区间 四、比较不同测验分数的差异 例如，某生在韦氏成人智测中， 语言IQ为102，操作IQ为106。且知言语 与操作的分半信度各为0.96和0.93。问该 生操作能力是否显著优于言语能力？ 结论 差异未达1个标准误 操作IQ并不高于语言IQ 差异显著性： 本例： 第四单元 影响信度的因素? 测验长度 样本特征 测验难度 时间间隔 一、测验长度 含义 测验试题的数量 例2-16：某测验有40题，信度0.65， 若增至120题，信度会是多少？ 二、样本特征（一）样本团体异质性的影响 特点 样本越异质，分数分布越广，S↑，r↑ ，测验越可靠 散布图 （二）样本团体平均能力水平的影响 选择测验时应注意 取样团体的变异性和能力水平 建立信度的团体与欲测团体是否一致 趋势 分别对非常同质团体建立标准化样本。 考虑年龄、性别、年级、职业和相似性等，选择适合其所在测验团体性质的信度系数和测验。 三、测验难度 一般趋势 难度分布越广，信度越高 难度与题型 简答题：P=0.5时，X为0～100，信度最高。 选择题的理想难度 学绩测验选择题的理想平均难度（洛德） 五择一：0.70 四择一：0.74 三择一：0.77 是非题：0.85 智力的时间变化 理论假设： T=X－E；S2T= S2X － S2E 信度：测量结果的稳定性 类型 重测、复本、重测复本 内部一致性：分半、同质性 评分者 测验条件、样本性质及估计方法不同信度不同 只对测验分数不一致大小作估计，未指出原因 （一）含义与方法 含义 评分者评分的一致性 方法 2评分者 2个以上者 rXY rρ 肯德尔和谐系数 1、应用范围和W系数 应用 1个评价者先后K次评 N个被评者或作品 W范围 0～1 直接解释 一、真分数与实得分数相关的解释 rXX 间接解释 信度系数 决定系数 ∵ r2XT = ST2/SX2 =rXX ∴ rXX为各方差的百分比 S2X分为 各S2E和S2T ∵误差源不同 信度估计法不同 rXX=0.90 （一）信度系数和指数 重测复本 0.70 分半信度 0.80 评分者信度 0.92 总误差方差 真分数方差 信度类型 rXX 时间、内容 内容取样 评分者差异 误差源 两者之差 误差的方差 时间取样 1-0.70=0.3 1-0.80=0.2 0.3-0.2=0.1 0.2+0.1+0.08=0.38 1-0.38=0.62 1- 0.92=0.08 X与T