第五讲 测验的项目分析 心理测量学教学课件.pptVIP

第五讲 测验的项目分析 一、什么是项目分析 二、测验项目的难度分析 三、测验项目的区分度分析 四、项目得分和答案选项的分析 五、项目间的相关分析 六、如何分析整个测验的鉴别力和区分度 七、如何提高整个测验的鉴别力和区分度 八、测验项目的偏向分析 九、测验的交叉效度分析 作业 一、项目分析的目的和任务 项目分析？就是根据具有代表性的被试样本的测验数据，对每个题目进行质量分析。主要包括： 项目的难度分析 项目的区分度分析 项目间的相关分析 项目的答案选项分析 目的和任务？ 对测验题目进行筛选、修订，保留质量较好的题目，删除品质较差的题目， 以保证测验的效度、鉴别力和信度。 二、测验项目的难度分析 (一)什么是测验项目的难度 (二)如何计算题目的难度 (三)测验难度对测验结果的影响 (四)测验的适宜难度分布 (五)测验题目平均难度的计算 若各题满分值一样，可计算各题难度算术平均数 若各题满分值不一样，可采用下面步骤和方法： 先计算各题满分值在总分中所占比率(即权重)，然后将各题难度乘以权重，再求和及计算各题难度系数的加权平均数。举例 或者用被试样本的测验均分除以测验满分值 (一)什么是测验项目的难度 项目的难度(difficulty)是指测验的项目(或试题)难易程度，通常用 P 表示。 在能力测验中，它就是指试题的难度水平。 在非能力测验(如个性、态度等测验)中，难度被称为“通俗性”、“流行性”水平，指被试样本中所选答案的倾向性。 (二)项目难度的计算 1、二级评分项目的难度计算 2、多级评分项目的难度计算 3、大规模测验的项目难度计算 4、二级评分项目难度系数的校正 1、二级评分法题目的难度计算公式 这类项目属客观题，一般是答对给1分,答错给0分. 难度计算公式： P = R/N [即：试题通过率] R 为其中的答对人数 N 代表总体(或被试样本)人数 练习：在一次200人参加的测验中，第一道单项选择题的答对人数为60人，第二道题目的答对人数为150人，两道题目的难度系数分别是多少？ 第一道：P= ？ 第二道：P= ？ 2.多级评分项目的难度计算（公式见下页） 这类题目题目的评分有三个以上分值。 在能力测验中，这类题目可以根据被试的答案与标准答案的接近程度，评定出多个分值。如：测验中的名词解释、简答、论述、案例分析、作文、列举等题目 在非能力测验中，这类项目一般有多个程度(或层次)不同的答案选项，根据选项的程度(或层次)，评定相应的分值。例如： 我喜欢可以拆开的玩具： A.完全符合、B.部分符合、C.完全不符合 我的思想似乎：A.走在了时代前面；B.一般；C.比较保守 多级评分项目的难度计算公式： 练习：在一次测验中，某道论述题的满分值为15分，90名学生的平均得分为10分。则对于这90名学生来说，该题的难度系数是多少？ Excel计算举例 3.大规模测验中题目的难度计算：极端分组法 当测试人数非常多，而对难度的精确度要求不高时，可以采用面步骤和方法计算题目的难度系数： 1.可将被试按总分高低排列， 然后取得分最高的27%作为高分组，取得分最低的27%的被试作为低分组。 2.分别计算题目对于两组被试的难度系数： PH 和 PL （ PH 和 PL的计算方法？） 3.根据下面公式，计算题目对于被试总体的难度系数： P＝(PH + PL)/2 获取高分组、低分组时，也可按50%、1/3，1/4的比例， 凯利（Kelley）1939年的研究表明，取 27% 最精确。 4.二级评分题目的难度校正 能力测验中, 是非和单项选择题作答有猜测的可能。答案备选项越少，猜测得分的可能性越大。 为平衡猜测对难度系数的影响, 可用下式校正： CP=(KP-1)/(K-1) CP为校正后的难度；K为备选答案数目； P为由题目得分直接计算出的难度（即通过率）。 校正目的：比较答案选项数不同的题目的难度 练习1：一个四选一题目的难度系数为0.60；一个是非判断题的难度为0.70。哪个题目的难度大？ CP=(4*0.60-1)/(4-1)=0.467 CP=(2*0.70-1)/(2-1)=0.40 (三)测验难度对测验结果的影响 1.对测验分数分布形态影响 2.对测验信度的影响 3.对测验鉴别和区分能力的影响 1.测验难度对测验分数分布形态的影响 如果测验项目是同质的，项目间相关在0.25~0.70间，那么 题目难度在0.25~0.75间均匀分布，测验难度适中时，测验分数会出现什么情况？（如下页图例A） 扁平的、近似正态的对称分布，分数的离散程度较大。 题目难度大多在0.80以上，测验难度较小时，测验分数的分布会出现什么情况？ （如