外语教学评估问卷.ppt

外语教学调查问卷的评价;本章结构;项目分析;极端分组法;3. 步骤 1）对问卷所有项目（即变量）的得分（即变量值）求和； 2）根据总分的高低对受访者进行排序分组，取总分最高的27%的受访者作为高分组，取总分最低的27%的受访者作为低分组。若样本较小，也可将前50%和后50%的受访者分别作为高分组和低分组。 3）比较高分组和低分组在每个项目上的差异，如果差异小而达不到显著水平，就意味着这个项目不能很好的区分不同的受访者，因此，在随后的数据分析中可以考虑将其排除。 ;内部一致性分析法;信度分析;外在信度检验; 2. 复本信度 1）概念：是指设计两套形式不同但内容相同的问卷项目，同时或连续对受访者进行调查，然后检验不同问卷项目测量结果之间的一致性。两个测量结果之间的相关系数越高，测量工具的信度越好。 2）使用条件：确保两个测量工具是平行或等值的，即无论是内容还是数量都必须相同或类似。（孩子你喜欢爸爸还是妈妈，说爸爸，过会问孩子，爸爸好还是妈妈好，他说爸爸好，就比较可信。但是你不能问，孩子，吃了吗，没意义，不论回答吃没吃都不能推测出到底是不是真的喜欢爸爸） 3）优点：可以很好地避免再测信度中受访者可能凭记忆回答的问题，而且也不要求两次测量必须有时间间隔。（既然再测信度要求有比较长的时间间隔，那么怎么避免呢。） 4）缺点：需要耗费大量的时间，设计难度大。（那有一个问题，就是怎么设计出两份内容相同而只是形式不同的问卷，而受访者又不会发现问的其实是同样的问题？刚才那是小孩，一般承认一听就知道问的一样，所以这是很难的，这也是复本信度的缺点。） ;内在信度检验;2. Cronbach alpha系数计算法 1）概念：克隆巴赫系数（Cronbach alpha）是检视信度的一种方法，由李·克隆巴赫在1951年提出。它克服了折半法的缺点，是目前社会科学研究最常使用的信度分析方法。 2）原理：基于项目间的平均相关，如果测出的内在一致性很差，其α系数最低时会为0；如果内在一致性很好没有误差时，α系数会为1。系数越高，说明量表的内在一致性越强，测量结果越可靠。 3）评价标准：在基础研究中，（自然科学等基础领域，要求过程严谨，结果准确）信度至少应达到 0.80 才可接受，在探索性研究中，（可能给不出比较严谨准确的结果，只是先探索探索）信度只要达到 0.70 就可接受，介于 0.70－0.98 均属高信度,而低于 0.35 则为低信度，必须予以拒绝。 影响因素： ① 量表项目数：某个量表的项目数越多， α系数越高。（一俩题说明不了问题） ② 测量内容：不同的测量内容，信度系数有高有低。例如，智力的测量，α系数在0.8左右；能力的测量，α系数不应低于0.7；情感因素（今天心情好，明天心情不好，变量和影响因素太多）的测量，α系数往往更低。 ;效度分析;内容效度;结构效度;3. 因子分析简介 1）概念：因子分析的基本目的就是用少数几个因子去描述许多指标或因素之间的联系，即将相关比较密切的几个变量归在同一类中，每一类变量就成为一个因子，以较少的几个因子反映原资料的大部分信息。 2）步骤： ⑴确认待分析的原变量是否适合作因子分析。 ⑵构造因子变量，确定因子的数目和求因子解的方法。 ⑶利用旋转方法使因子变量更具有可解释性。 ⑷计算因子变量得分。 3）优点：因子分析法就能很好的涵盖原始数据的各个项，同时将分析过程简化为因子项的分析，从而简便、快捷。 4）缺点：因子分析只能面对综合性的评价，同时对数据的数据量和成分也有要求，在设计调查问卷的时候也需要针对性地设计问题。;Thank you!