第四章地理测试命题质量分析.pptVIP

r的取值范围为-1≤r≤1， 如果r0，说明两者是正相关，取值越大，表明效度越高； 如果，r0，说明两者是负相关； 如果r=0，说明两者不相关，效度为零。 第61页，共88页，编辑于2022年，星期二 相关系数的计算方法还有以下两种。 ①用标准分数Z 用ZX、Zy分别表示被测验和校标测验所得分数的标准分数，学生数用n表示，则 ②利用原始分数 第62页，共88页，编辑于2022年，星期二 二、信度的概念 信度也称“可靠性”或“测验分数的稳定性”，是指测量的一致性程度，表现在同一个测验在不同时间上所得结果的一致性。 对信度的估计或计算，通常用相关分析的方法，即计算两种变量间的相关系数，以相关系数作为数据指标来衡量测验的一致性程度，也称为信度系数。信度系数的取值范围在0与1之间，其值越大，说明测验的可信程度越高，试题的“可靠性”也就越好。 因此，试题的信度，可以看作是试题的“可靠性”，即它在多大程度上能准确地反映学生学习的真实水平。 试题的信度是无法直接进行测量的，但是可以通过考试的信度系数的估算来间接反映。一般来说，考试的信度系数越高，说明试题的“可靠性”越好，反之，试题的“可靠性”则较差。 第29页，共88页，编辑于2022年，星期二 因为试题的质量会直接影响到考试的信度系数的大小，这种影响主要体现在以下几方面： 一是题目的数量，如果题目很少，则测验所得分数越容易受试题取样偶然因素的影响，测验的信度就会降低，反之，则会提高测验的信度； 二是题目的难度，题目的难度会影响到测验分数的分布范围，从而影响测验结果的信度，如，题目难度过大，考生大部分得低分，测验分数频数分布曲线形成正偏态分布，导致分数间的差异较小； 三是题目的区分度，因为只有当题目有较好的区分度时，才能使实际水平较高的学生在测验中获得高分，实际水平较低的学生得低分，这样才能保证测验结果的“稳定性”和“可靠性”。 第30页，共88页，编辑于2022年，星期二 三、几种常用信度的意义及计算方法 根据不同的测验目的，信度可以分为两大类，即常模参照测验的信度和目标参照测验的信度，下面就这两大类信度的意义及一些常用的计算方法作简要的介绍。 1．常模参照测验的信度 常模参照测验的主要目的是确定学生个体在群体中的相对位置，测验结果的一致性程度可以用每一个学生个体在群体中的相对位置的变动情况或用个体的测验分数的可能分布范围来表示。 前者用信度系数(相关系数)来表示，后者用“测量标准误”来表示，它们均以测验分数的变异性为前提，一般只用于常模参照测验的信度测量。 下面只对用信度系数的估算方法进行介绍。信度系数的估算方法很多，其中在中小学地理教育测量与评价中比较常用的主要有以下三种方法。 第31页，共88页，编辑于2022年，星期二 (1)重测法 重测法是指用同一份试题在不同的时间对同一学生群体进行两次测验，以这两次测验分数之间的相关系数作为信度系数的一种方法。 用重测法求得信度系数又叫重测信度或稳定性系数，它反映的是两次测验分数之间的一致性程度。如果两次测验分数的相关性越好，说明测验的信度就越高，表明试题的稳定性好。 第32页，共88页，编辑于2022年，星期二 在用重测法估算信度系数时，要特别注意两次测验时间间隔的长短。合适的时间间隔是提高估算信度准确性的一个重要因素：时间过短，容易产生练习效应；时间过长，由于被试知识背景等的变化，会影响第二次测验分数。 根据测验目的和性质的不同，其时间间隔可以是几天，几个月，甚至几年。在非标准化测验中很少采用这种方法来估算试题的稳定系数，而在标准化测验中，采用重测法来获得试题的稳定性系数不仅是可能的，而且稳定性系数还是衡量试题质量的一个重要指标。 第33页，共88页，编辑于2022年，星期二 【例】假设某地理教师对某班级的45位学生进行一次标准化地理测验，为评价该次测验结果的稳定性，过了10周后，又用同一份试题对该班全体学生进行第二次测验，两次测验的分数如表4—6所示。试估算这次测验的信度系数(为计算的简便，这里仅取9位考生的分数）。 第34页，共88页，编辑于2022年，星期二 第35页，共88页，编辑于2022年，星期二 (2)复本法 用复本法估算信度系数时，首先要编制一份在题目内容、形式、难度、区分度、评分方法、题量、分值、测验时间等方面都与原测验试题基本相同或相近的复本，然后分别对同一学生群体进行测验，用考生在两次测验中所取得的分数之间的积差相关系数作为信度系数。 用复本法求得的相关系数所表示的信度，叫做复本信度。它所反映的是用两份等值测验试题对同一学生群体两次测验结果的等值性程度。如果考生对两份测验试题都能比较