命题流程和质量保障.ppt

中考科学试题难度区分度分布图 试题分析指标——选项比例 案例——选择题 难度 区分度 选项信息 A B C D 0.87 0.30 百分比 3.1 86.8 6.7 3.1 点二列 -0.20 0.37 -0.20 -0.21 案例——选择题 难度 区分度 选项信息 A B C D 0.37 0.19 百分比 46.0 12.4 4.8 36.7 点二列 0.12 -0.17 -0.25 0.10 试题分析指标——采分点比例 * 案例——主观题采分点 难度 区分度 采分点 0 1 2 3 0.34 0.42 百分比 36.8% 30.5% 25.7% 6.9% IRT 难度 -0.36 0.76 2.34 其中Xp为答对某题的人的总平均分 Xq为答错某题的人的总平均分 P为答对某题的人数百分比 q为答错某题的人数百分比 St为总分的标准差 试题分析指标——点二列相关 案例——选择题 难度 区分度 选项信息 A B C D 0.87 0.30 百分比 3.1 86.8 6.7 3.1 点二列 -0.20 0.37 -0.20 -0.21 案例——选择题 难度 区分度 选项信息 A B C D 0.37 0.19 百分比 46.0 12.4 4.8 36.7 点二列 0.12 -0.17 -0.25 0.10 试题分析指标——能力值 * 试卷分析——2011试卷信息函数 后5% 前12% 前40% 案例——能力后5% 难度 区分度 0.84 0.47 案例——能力后5% 难度 区分度 0.83 0.47 案例——能力最高试题 2011年32道题第3问采分点 难度 区分度 采分点 0 1 2 0.02 0.06 百分比 97.4 0.65 1.95 IRT 难度 2.61 2.68 案例——主观题采分点设计 难度 区分度 采分点 0 1 2 3 0.34 0.42 百分比 36.8% 30.5% 25.7% 6.9% IRT 难度 -0.36 0.76 2.34 2011年32道题第2问采分点 难度 区分度 采分点 0 1 2 3 4 0.48 0.56 百分比 28.2 0.16 48.0 0.09 23.5 IRT 难度 -0.70 -0.70 0.94 0.94 关于评价 评价＝测量（量的记述）或非测量（质的记述）＋价值判断。 美国学者格朗兰德（Ｇronlund,N.E.） 学习动物精神 11、机智应变的猴子：工作的流程有时往往是一成不变的，新人的优势在于不了解既有的做法，而能创造出新的创意与点子。一味 地接受工作的交付， 只能学到工作方法 的皮毛，能思考应 变的人，才会学到 方法的精髓。 学习动物精神 12、善解人意的海豚：常常问自己：我是主管该怎么办才能有助于更好的处理事情的方法。在工作上善解人意， 会减轻主管、共 事者的负担，也 让你更具人缘。 * 测试目标、测试框架、试题属性，试题内在一致性 案例 某地区平均得分率：82.1% 试题目标：理解混合运算的顺序 某地区平均得分率：74.2% 在错误的答案中，396约占40% 3. * * 案例 * * 典型作答 * * 典型作答 * * 访谈了两所学校（12人），总结： 多部分学生的作答跟表中数据无关，没有利用数据做合理判断的意识； 部分学生已经有了利用数据做判断的意识，但学生的理由比较模糊。 2位学生从平均角度做答。 反思： 试题本身提问方式 三年级学生 利用数据做合理判断？ 多倍试题及学生访谈 小规模试测 大规模试测 专家审题 命题流程 小规模预测 题目表述是否清晰、准确 背景学生是否熟悉 学生的作答，以及是否与命题预设一致 选择题选项支的设置，是否有迷惑性； 主观题学生作答情况等，为试题修改和评分标准的初拟提供信息。 试题的有效性及科学性 案例 考查能力：理解概念 考查目标：理解数位的意义，并能比较大小 现状：得分比率过低，且A选项比例过高分析：可能是学生在组合比较数据由于数量级悬殊不大，造成了学生比较的难度建议：将数字9改成数字8。 修改如下： * 案例——PISA样题 小明用同样长的两根铁丝围成了如图的甲、乙 两个图形，比较它们的面积，那么（ ）． A．乙比甲大 B．甲比乙大 C．一样大 D．无法比较 案例 A、B、C水平学生的平均得分率 分别为：78.8%，46.9%，28.2%。 这是一幅南极洲地图,请利用图中的比例尺估计它的面积,并解释你是如何得到的. 案例——评分标准的设计 案例——评分标准的设计 * * 反映试卷总体难度及试题难