05 研究设计3-传播学考研资料.pptVIP

研究设计(3) 测量品质：测量的信度和效度 * 量表(测量)的信度和效度 试联想大家经历的熟悉的事情，如考试，你有可能发现你的实力很强，但试卷可能有问题，没有将你的实力考察出来。 也就是说，问卷的制作有问题，没有测量到真正需要测量的事物。我们把这类问题称作测量的信度(reliability)与效度(validity)问题。 * 假设我们来测量“创新精神” 方式1：“我是一个很讲究创新的人”，用5点李克特量表询问。 方式2：采用以下两个问题：(1)愿意学习新事物，(2) 对科技的新近发展很感兴趣，以5点李克特量表问。 请问，哪种测量方法可能更加准确？为什么？ * 测量品质 两个标准：信度(reliability)和效度(validity)。 信度：在不同的时点上多次测量，产生一致结果的可能性。譬如，同一份问卷，同一个受访者填写两次结果会一样么？ 你喜欢看武侠片么？“喜欢”、“不喜欢”、“说不清楚”。 请在0-100之间标出你喜欢看武侠片的程度？ 陈述(statement/item)愈是具体实在，则测量的信度愈高 客观的观察一般会产生更有信度的结果 看恐怖片受到惊吓的程度：询问 vs 皮肤测试 问受访者的年龄 vs 查验其身份证 * 一种衡量消费者创新精神的量表 通常，当新的（摇滚音乐带）上市时，我是朋友圈中最后一个去购买的。 如果听说商店有新的（摇滚音乐带）出售，我会很感兴趣并去购买。 与我的朋友相比，我拥有的（摇滚音乐带）很少。 一般来说，在朋友圈中我是最后一个知道最新发行的（摇滚音乐带名）的。 即使从未听说过的新（摇滚音乐带），遇上时候我也会购买。 我比别人更早了解各种新的（摇滚曲）的名称。 * 对于下列各种说法，你的同意程度如何？ 测量结果=真实值+误差值 46 4 第1种测量工具：得分=50 真实 误差 30 20 第2种测量工具：得分=50 真实 误差 * 信度的三个维度 信 度 稳定性：在不同时点上的测量有前后一致性。采用“测试-重试”的方法，以相关系数来考察信度，如果r接近1，则测量具有稳定性。 内在一致性：量表中所有组成题项含义的一致性。如量表中每个题项对被测概念而言得分是等同的，那么量表具有内在一致性。题项折半方法(r)和阿尔法(alpha)用以评估内在一致性。 对等性：即交叉测试信度(cross-test reliabi- lity)，评估一个测量的两种相应形态的相关性；用两种分别使用不同量表或不同测量技术的工具来测量同样的概念。编码员间信度(inter-coder reliability)是常见的情形。 * * 测量“媒体范例评价” * Zhongdan Pan Joseph M. Chan. (2003). ‘Shifting Journalistic Paradigms: How China’s Journalists Assess Media exemplars’, Communication Research, 30(6), 649–82. * 测量“媒体范例评价”的信度 改善测量信度 陈述(statement/item)愈是具体实在，测量信度愈高 客观的观察一般会产生更有信度的结果 看恐怖片受到惊吓的程度：询问vs皮肤测试 问受访者的年龄vs查验其身份证 清晰概念化所有构想：尤其对复杂概念或构念必须如此 前测－后测法：同样受访者两次施测，将测量的结果算术平均 多指标测量：将各个指标的分值加总 E.g., Attention to news media Do you pay attention to news on television? Do you pay attention to news in the newspapers? Do you pay attention to news on the Internet? Do you pay attention to news on radio? * 改善测量信度(续) 使用成熟量表：少用自建量表，但在借鉴成熟量表时需要对其加以改造，尤其要注意文化差异问题 提高测量层次：尽可能用最精确的等级来测量构想 Research-worker reliability Interviewer training in survey Supervising interviewers in a survey and random checking of completed interviews Inter-coder reliability in content analysis * * 测量的效度 测量的效度，即测量的有效性程度。它指的是测量工具或测量手段能够准确测出所要测量特质的程度。即实证测量在多大程度上反映了该概念的真实含义。 “请