高考模考语试卷的多元概化理论研究.pdfVIP

中文摘要 概化理论是一种测验与评估的信度理论,也涉及到对效度的探讨,是对经典测量理论 CTT ,特别是其信度理论的有力拓展,是方差分析方法在测量资料变异性,尤其是对测量误 差来源的分解与考察上的有效运用。它能按照不同的误差来源对测量分数进行具体分解,并 采用方差分析统计方法,深入考察误差来源对测量信度的影响程度,在此基础上,可以帮助人 们针对具体误差来源,提出有效控制和改善测量精度的措施和方法。 本研究在试卷结构上，从三个角度分析高考模考语文试卷在区分考生语文能力上的测量 信度，估计语文试卷中各类因子的测量精度及对测验总分所作的实际贡献，通过各因子对总 分贡献比例与其在试卷中的分值比例的比较，判断试卷的结构是否合理。预测各因子样本容 量的变化对试卷信度的影响。这三个角度分别为： 1 把语文试卷考查的能力分为现代文阅 读能力，古代诗文阅读能力，语言文字应用能力；（2 ）把语文试卷中的试题分为客观题和主 观题两个因子；（3 ）把语文试卷中的试题分为阅读题和表达题两个因子。 通过对试卷进行三因子和二因子的多元概化理论研究，得到如下结论： 1 这次高考模考测验总分的测量信度处于中等水平。在现代文阅读、古代诗文阅读、 语言文字应用三部分内容中，对古代诗文阅读这一知识能力的考察，估计精度是最高的；主 观题的作用较大，而客观题的作用则很小；表达题的作用要比阅读题的大些，题目效应在表 达题因子上的方差分量很大，说明在表达题上，题目之间的难度区别很大，分值区别大，阅 读题的概化系数为可以接受的 0.60568，表达题的概化系数只有 0，23566 ，信度非常小。 2 现代文阅读、古代诗文阅读、语言文字应用三部分内容对全域总分方差分量的贡献 比例与当初命题时的赋分比例是一致的，所以该试卷的试题结构是合理的；主观题和客观题 二个因子对总方差的贡献比例与它们的赋分比例也是较为一致的；用阅读题和表达题二因子 所拥有的题目数量占题目总数的比重作为权系数值来合成全域总分，估计全域总分的概化系 数为 0.64434 。但二个因子对总方差的贡献比例与它们的赋分比例很不一致，阅读题对总分 的作用比较大，表达题对总分的作用比较小，但它们被赋予了同样的分值。 3 增加因子的样本容量可以提高测验的信度，样本容量提高到原来的两倍，就可以得 到令人满意的信度，因为试卷的试题量的结构基本上是合理的，所以只要按比例的提高这三 部分内容的试题量就可以了。其中增加表达题比增加阅读题可以使总分的信度提高得更快。 关键词 多元概化理论 语文 三因子 二因子 Abstruct Generalizability theory, taking a dynamic and predictable reliability view, provides a dependable reliability analysis for complex and real-life multi-dimensional measurement through some statistical tools, for example ,experiment design and variance component model.With the development of psychology and education, most psychological and educational tests are multidemensional. In order to meet the need of the multidimensional testing reliability, Multivariate Generalizability Theory MGT emerges as the times require. This reseach explores the application of MGT, including MGT model, variance and covariance components, estimation and explanation, multivariate generalizability coefficient, weight selection and so on. This research illustrates MGT through reliability analysis of the Chinese test of college entrance exami