考试命题基本知识与技巧分解精品.ppt

考试命题的基本知 识与技巧 忠州二  一、考试命题的四度 从高考性质谈起:高考是合格的高 中毕业生和具有同等学力的考生参 加的选拔性考试,高考应具有较高 的信度、效度,必要的区分度和适 当的难度。  (一)考试的信度 考试的信度指测量结果或评价结果之间的 致性程度。也就是测量结果是否真实、客 观地反映了考生的实际水平。无论是量的稳 定性,还是质的分析判断,高信度的测验或 评价表意味着具有较好的误差控制能力。因 此,信度是反映测量或评价表性能的一个重 要的质量指标。  具体而言,可以从以下三方面来理解 测量的信度 1信度指实测值与真值相差的程度 测量的目的之一,就是希望通过测量得 到的实测值能够接近事物的真实值。由于各 种原因,实测值一般不会完全等于真实值, 两者之差称为测量误差。测量误差越小,测 量的信度就越高。  2信度指统计量与参数之间的接近程度 统计量和参数是统计学中的两个基本概念。 统计量是指样本上的各种数字特征(如样本的 平均数、标准差等),参数是总体上的各种数 字特征(如总体的平均数、标准差等)。统计 量越接近参数,这个统计量的可靠性就越高, 因此,信度就越高。要知道统计量对参数的接 近程度,可以对参数进行区间估计。这种方法 对估计真分数也很有用的。但这种理解也无法 计算出信度。  3信度指两次重复测量或等值测量之间 的关联程度 如果对同一对象进行两次重复测量或者等 值测量以后,计算两次测量的相关系数,相关 系数越高,说明测量的信度就越高;反之,就 越低。对于信度的这种理解,有利于信度的计 算。但重复测量会受到被测对象的经验、知识 增长等因素的影响,等值测量又较难编制,因 此,采用这种方法计算信度时,也是有误差的。  信度是任何一个测量的必要条件,对于 教育测量来说,它具有更为重要的意义。因 为教育测量的对象主要是精神现象,所测量 的特性不易把握,为了能真实地反映测量对 象的某种特点,需要更加注意测量的信度, 从而正确地判断测量结果的价值。只有信度 高的测量才能成为教育工作者有用的工具 否则,测量的结果是无意义的、无效的。  二)考试的效度 效度是指测量结果的准确性和有效性的程度, 亦即测量是否达到了预期的目的。考试的效度 是指通过一次考试能确实地测量到它所欲测量 的程度。因此,考试的效度既与考试本身属性 有关,也与考试的用途与使用方法有关。离开 考试用途,孤立地研究考试的效度是没有太大 意义的。效度的概念在不断发展,效度的种类 也因用途或研究方法的不同而不同。  1.考试的效度分类:内容效度、准则效 度和结构效度。 (1)内容效度指的是测验题目对有关内容或行为 取样的适用性,从而确定测验是否是所欲测量的行 为领域的代表性取样。 内容效度的评估方法 ①专家判断法 ②统计分析法(评分者信度复本信度折半信度再 测法); ③经验推测法(实验检验)  (2)准则效度指测量所得到的数据和其他被选 择的变量(准则变量)的值相比是否有意义。同 概念可能有多种测量方法,假如其中一种成为准则 ,另外一种就可以与之比较而判断其效度。 (3)结构效度指测量结果体现出来的某种结构 与测值之间的对应程度。结构效度分析所采用的方 法是因子分析。最关心的问题是:量表实际测量的 是哪些特征?在评价建构效度时,调研人员要试图 解释“量表为什么有效”这一理论问题以及考虑从 这一理论问题中能得出什么推论。结构效度包括同 质效度、异质效度和语意逻辑效度