实验设计评价课件.pptVIP

《心理实验设计》 实验设计的评价与选择 研究设计的效度 良好设计的标准 一、实验设计的评价 Determining The Reliability and Validity of A Research 研究的信度与效度 研究的信度 A measuring instrument is perfectly reliable if we get exactly the same result when we repeat the measurement a number of times. Formally determining reliability is particularly important when the dependent variable is the score from a test instrument such as a test of achievement,aptitude,or personality traits. Test-retest reliability Alternative-form reliability Split-half reliability 研究的效度 指研究真实、正确地揭示所研究问题的本质及其规律的程度，即结果符合客观实际的程度。 Validity refers to whether we are measuring what we want to measure. 研究信度与效度的关系： 信度是效度的基础，效度是信度的目的。提高效度必然以提高信度为前提。 效度是评价研究设计和结果的根本标准。 效度的类型 （Cook Campbell,1979） 构思效度（construct validity）： 也称建构效度、构念效度、结构效度 内部效度（internal validity） 统计结论效度（statistic-conclusion validity） 外部效度 （external validity） 对一项研究来说，首先要考虑的是内部效度，而后就是外部效度，其他两种效度相对次要。 内部效度 内部效度是指在研究的自变量与因变量之间存在关系的明确程度，即保证因变量的变化确系由特定的自变量所引起，而不是其它的外部变量。 影响内部效度的因素 成熟因素 历史因素 被试选择差异 被试的缺失 前测效应 接上页 实验处理的扩散效应 统计回归效应 多种研究条件与因素间的交互作用 外部效度 外部效度是指研究结果的代表性和适用性；涉及研究结论的一般化问题。 总体的一般化——实验结果应用到不同于原始研究的、范围更广的其他群体或被试中。（总体效度） 情境的一般化——实验结果应用到不同于原始研究的情境或环境中。（生态效度） 时间的一般化——实验结果应用到不同于原始研究的时期。（时间效度） 影响外部效度的因素 实验环境的人为性：反应性情境 测量工具的局限性 接上页 交互作用：实验处理与实验持续时间的交互作用、实验处理与测量时间的交互作用以及选择与自变量之间的交互作用，等。 多重实验处理的干扰 对测量的敏感化 样本的代表性不足 二、如何选择合适的实验设计 Choose a type of experimental design becomingly 良好实验设计的标准 能满足理论框架的要求，能恰当地回答要研究的问题，这主要是通过巧妙的实验构思完成的； 能使同样一批数据给出较多地信息，这依赖于实验者能按照统计分析的要求收集数据； 能提供实验的高信度，即实验的可重复性，这主要是通过较好地控制无关变量而达到的； 续上页 能提供实验的高效度，即研究结果反映客观现实的程度，这是通过增加实验设计的复杂程度来实现的； 能提高实验的敏感性，即能探索一些深入的、细微的、难以通过日常观察或经验察觉到的现象，这主要是通过选择合适的实验设计完成的； 尽量在实施上是经济、省力、可行的。 选择合适的实验设计 根据研究问题的复杂程度选择实验设计； 根据对实验结果的精度的要求来选择实验设计； 根据实验实施的可行性选择实验设计； 问题复杂性 单因素设计：简单易行，但外部效度和研究的效率偏低，不适合研究复杂的心理教育问题。 因素设计：能同时考察多个因素之间的相互影响、相互制约的关系，适合研究复杂的理论和现实问题；问题越复杂，实验设计的因素就越多。但因素的多少并非任意，过多的因素会带来数据分析和推论解释的困难。 系列研究：将众多因素分散在一系列研究中分别予以考察。 研究精度 研究精度的要求越高，对实验设计敏感性的要求也越高。 提高设计敏感性的途径： 可行性 变量特性： 被试间自变量——性别、年龄、职业等被试变量 被试内或被试间自变量——操作任务、环境特征…… 最低样本数量（以2×3设计、每个处理4名被试为例