怎样检验和提高汉语测试效度.docVIP

怎样检验和提高汉语测试效度 　　摘要：汉语测试是大学对外汉语教学中的重要环节，而测试效度的检验和提高则是保证汉语测试有效性的最重要的问题。本文以HSK(汉语水平考试)为例，从不同角度论述了五种检验效度的方法：测试内容的检验、试卷内部结构的检验、与效标相关的检验、组间比较分析检验、问卷调查检验。并从试卷的质量、阅卷评分的质量、考生的情绪、测试方式等方面提出了提高效度的主要途径。 　　关键词：语言测试；效度；效标；相关；因素分析 　　 　　目前，学习汉语的外国人越来越多，随着各级各类大学中对外汉语教学工作的蓬勃发展，汉语水平测试种类越来越多。除了HSK，国内还出现了近10种针对母语非汉语者的汉语水平考试。那么，这些测试能在多大程度上反映考生具备的生活和工作所需要的汉语能力?证书能否得到大多数人的认可?这就需要我们花大力气研究测试的效度。 　　效度(validity)即有效性，是最重要的测试质量指标。对于语言测试来说，效度是指一个语言测试在多大程度上测出了它想要测的语言能力或者语言知识。一个语言测试只有具有较高的效度，我们才可以正确地、恰当地解释和使用测试的分数，这个测试才有意义。 　　检验汉语测试的效度，主要是回答两方面的问题：第一，这项测试的测试目标是什么，究竟测量的是考生哪方面的汉语能力。第二，这项测试在多大程度上测量了所希望测量的能力或知识，即在多大程度上达到了它的测试目标。要回答这两个问题需要从多个角度用多种方法积累证据。 　　 　　一、检验汉语测试效度的角度和方法 　　 　　检验汉语测试效度的角度和方法，主要有以下五种： 　　 　　1　测试内容的检验 　　内容合适是测试有效的一个基本前提。对于学业成绩测试，测试内容的检验侧重于检验题目能否代表教学的内容。对于汉语水平测试，主要是检验测试内容是否符合测试目标，有些内容是否不利于某些考生。测试内容的检验有很多方式，其中最通行的是两种：一种是专家审查，一种是题目公平性检验。 　　专家审查的内容包括：评定该测验是否存在常识性错误，是否专业性较强，是否有易引起某些考生敏感的内容，以及题目是否符合测试的目标和测试范围。这种方法可以在实施测试之前，也可以在实施测试之后，但以在实施测试之前进行为佳。 　　题目公平性检验广泛使用的方法是：按照一定条件把具有相同能力的考生分成两组：目标组和参照组，计算两组考生在某个题目上的正确回答概率是否相同。如果不同，则说明该题对某组考生群体有偏向。任杰(2002)使用这种方法对1999年参加HSK(初、中等)某试卷的国内日本考生和国外日本考生的成绩进行了分析。结果表明中国境内考生听力占优势，而境外考生语法和阅读成绩好于听力，有利于中国境内考生的题目多于利于境外考生的题目，但比例很小。因此HSK(初、中等)某试卷的题目对于中国境内与境外的考生基本公平。 　　专家审查带有一定的主观性，而题目公平性的检验则具有较强的客观性。所以，二者结合，结论更加可靠。 　　 　　2　试卷内部结构的检验 　　试卷内部结构的检验一般包括：因素分析，题型与题型之间、分测验与分测验之间相关检验，以及题目与所属分测验之间的相关检验。 　　(1)因素分析 　　因素分析是一种统计技术，目前在语言测试的效度检验中应用十分广泛。因素是从为数众多的变量(例如每个题目、每个题型或每个分测验)中概括出来的。例如对汉语的理解能力和使用汉语表达的能力，都可以看作是一种因素。通过因素分析可以找出较多变量之间的同一特性，进而分析变量与因素相关的程度，了解测试各部分的测试目标的集中程度、测试结果与测试目标的一致程度。 　　例如，朱宏一、王小玲(2008)对2007年10月的HSK(高等)某试卷进行的因素分析。把客观卷三个分测验中的八个题型的2108名考生成绩和主观卷两个分测验中的三个题型考生成绩分别作为11个变量，并对它们进行因素分析。第一次因素分析后从11个变量中抽取出了一个因素――一般的汉语能力。第二次因素分析发现，可以从这些变量中抽取出两个因素，即从客观卷的八个题型的成绩中抽取出来一个因素――对汉语的理解能力，从主观卷的三个题型的成绩中抽取出另一个因素――使用汉语表达的能力。这两次因素分析的结果从统计意义上证明：HSK(高等)某试卷各部分的测试目标比较集中，并且实际测试出的能力与测试者设定的测试目标是基本一致的，从而为该测试的良好效度提供了支持的证据。 　　(2)分测验之间、题型之间相关的检验 　　语言能力应该是既可以分解又相互有关的，比如考生的阅读能力和写作能力，既可分解又必须相关。因此如果各分测验和各题型既服务于这个测试整体的测试目标又各有分工，这个测试的试卷结构就能够比较合理地体现测试目标。相反，如果同一测试的各分测验和各题型的测试目标都完全相同