调查问卷的信度与效度课件.ppt

从理论的角度来看，一份好的问卷应具有足够的效度和信度。但是，从实践的观点来看，一份好的问卷还应该具有实用性，即问卷的经济性、便利性和可解释性。 适当增加问卷的长度。增加问卷的长度既可提高问卷的信度，也可以提高问卷的效度，但增加问卷的长度对信度的影响大于对效度的影响 。 但是按经验以使答卷者在30分钟之内完成较佳。 提高问卷信度的方法： （1）适当延长问卷的长度 （2）问卷的难度适中（3）问卷的内容尽量同质 （4）测验的时间要充分（5）测验的程序要统一 提高问卷效度的方法 （1）理论正确，解释清楚 （2）操作规范以减少误差 （3）控制系统误差 （4）样本适宜且要预防流失 （5）适当增加问卷的长度 （6）排除无关因素干扰。 按要求把握好各个环节！ * * 任何研究都会有误差，没有一项研究推论能够达到百分之百的真实。 我们的目标只是使研究结论的效度最大化，即由样本推断出的总体特征尽可能真实。 尽管在研究的分析阶段可以发现和处理一些研究误差，但最好是在研究的设计和执行阶段就注意避免和减少误差 The goal is simply to maximize the validity of drawing inferences. * （bias）测量值与真实值的接近程度， Cronbach’s α信度 Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika. 16, 297-334. It is a measure of squared correlation between observed scores and true scores. Put another way, reliability is measured in terms of the ratio of true score variance to observed score variance. 其计算公式为： 式中n为问卷包含的题目数， 为答卷者在第i题得分的方差， 为答卷者问卷测验总得分的方差。 α系数有以下性质： （1）α系数是所有可能的分半信度的平均值； （2）α系数是估计信度的最低限度； （3）当问卷计分为二分名义变量时，即答案为0或1，α系数与KR20值相同，即库德-理查森信度公式是克隆巴赫的α系数的一个特例。 低信度：α0.35, 中信度： 0.35α0.70,高信度： 0.70α 一般地，问卷的α系数在0.8以上该问卷才具有使用价值。 Cronbach‘s α值皆达0.85以上，表明问卷信度良好。 (6)评分者信度（inter-scorer reliability）* 考察评分者信度的方法为，随机抽取相当份数的问卷，由两位评分者按记分规则分别给分；然后根据每份问卷的分数计算相关系数，就得到评分者信度。评分者信度也可以是一位评分者两次评分的相关系数。如果是多个评分者或一位评分者两次以上的评分，可采用肯德尔和谐系数和Kappa系数。肯德尔和谐系数用于等级资料，Kappa系数用于定性资料。 信度系数类型 ： 重测信度 复本信度 分半信度（Spearman — Brown； Guttman） 库德-理查森系数 克隆巴赫α系数 评分者信度* 5.提高信度的方法 问卷的信度越高，受到人、时、地、物的干扰就越低，其所能反应事实或让人相信的程度越高，因此在问卷实施前如何有效提高信度是问卷测验成败的关键。通常提高问卷信度的方法为： （1）适当延长问卷的长度 问卷题目较多，其在一定程度上排除了偶然因素的影响，从而提高了问卷的信度。 但是问卷长度的增加与问卷的信度的增加并不总是成正比的，当信度系数较小时，延长问卷长度，问卷的信度系数增加较大；而当信度系数较大时，延长问卷长度对信度系数的影响就较小。 （2）问卷的难度适中 当问卷题目难度太大时，问卷得分普遍过低；当问卷题目难度太小时，问卷得分普遍较高。问卷题目太难或太易都会使问卷得分差异减小，使实得分数方差减小，从而降低了问卷的信度。 （3）问卷的内容尽量同质 内容同质的问卷，要求答卷者具有相同的能力、知识和技能。因而为了提高问卷的信度，问卷的内容应尽量保持同质。 （4）测验的时间要充分 一份问卷应保证绝大多数答卷者在规定的时间内能完成测验。当答卷者不能从容地回答所有题目时，问卷的得分就不能反映答卷者的真实情况。 （5）测验的程序要统一 问卷题目要统一，指导语、回答问题的方式、分收试卷的方法和问卷测验的时间等都要统一