质化编码技术在内容效度验证中的应用_医学论文.docVIP

质化编码技术在内容效度验证中的应用_医学论文 质化编码技术在内容效度验证中的应用_医学论文 作者：胡炜，宋华淼，苗丹民，刘练红，徐蕊 【摘要】 目的：尝试将质化编码技术用于对问卷的内容效度研究. 方法： 在公文筐测验研究工作过程中采用质化研究的方法对测验内容效度进行分析，并与传统的专家评定内容效度的方法进行比较. 结果：采用质化编码技术获取情景模拟测验项目内容或绩效考核项目内容的时候，在保证编码一致性达到85％的基础上，和专家评定内容效度吻合程度良好. 结论： 质化研究的方法可以作为一般量化研究方法的先验步骤和所要量化的内容结果的验证方法，进一步证实可以将质化研究和量化研究相互作为预研究和验证研究的循环混合研究模式的思想，供研究者作为参考. 【关键词】 定性研究；编码技术；内容效度 0引言 　　关于量化研究范式和质化研究范式的应用曾争论一时. 而今，将两种研究范式结合应用已成为学术界关注焦点. 虽然混合研究的根源可以追溯到20世纪70～80年代，学术界所接受的关于混合研究方法范式已有研究［1］. 国内外文献也陆续报道了将质化和量化混合研究方法的思想［2-4］. 本研究试图通过将质化编码技术引入到公文筐测验的内容效度研究中来讨论质化研究作为量化研究内容效度的验证方法这一思路的可行性. 　　1对象和方法 　　1.1对象由4名心理学专业研究生组成的质化编码小组和由1名心理学专家和3名“行业专家”（subject matter experts， SMEs）组成的专家评定小组. “行业专家”均为有5年以上干部管理、人事工作经验的大连市某区委组织部干部. 　　1.2方法该研究中由4名专家组成员采用“背靠背”的Delphi专家评价法，经过4轮反复评判，从已有的公文资料中筛选出11份经专家认定为通过前期工作分析获得的测评维度上有代表性，并且相互区分度比较大的公文资料. 再由专家对公文内容和可能出现的应对方式进行内容评定，并且归纳出公文资料的内容条目，列出条目表格. 测评维度的专家评价一致性的计算采用肯德尔和谐系数（Kendell）. 将公文资料编订为《政府公务公文筐测验》问卷. 问卷分为两个部分，直接批示部分（卷一）和开放自陈部分（卷二）. 卷二要求被试者回答对材料情景的第一认知反应内容，对任务和目标群体的分析，采取行为策略的思维过程，以及对可能结果的预期等方面内容. 以期符合行为事件访谈（behavioral events interview, BEI）的情景－任务－行为－结果技术模式（STAR model）［6］. 再由区委组织部组织所要考评的400名人员进行公文筐测试. 收回问卷390份，在其中随机抽取41份问卷，将卷二的回答转录成文本格式文件存在电脑中，编号后随机分配到4名编码小组成员手中采用开放式编码方法进行分析. 编码小组事先和专家小组无任何沟通. 首先采用统一的理论模式框架对编码小组成员进行统一培训，然后4人同时编一份问卷，并对结果进行讨论，无法达成一致的地方记录下来，计算4人编码一致性. 编码一致性（category agreement, CA）即编码者之间对相同资料的编码归类相同个数占总个数的百分比. 采用Winter（1994）动机编码手册提供公式，S为评分者编码归类相同的个数，A1为甲编码个数，A2为乙编码个数，A3为丙编码个数，An为第n个编码者编码个数，计算公式为CA＝n*S/（A1+A2+A3＋……＋An）. 如果编码小组4人编码一致性达不到0.700，则重新讨论，反复进行，直到达到编码一致性要求. 然后一致性最高的两人分为一组，两人编码同一份答卷材料. 按照如前所述方法进行编码，并记录编码一致性. 最后归纳成编码条目归纳表，用于和专家评定的条目表进行比较验证. 　　统计学处理 研究中所有的质化编码过程均在EXCEL2003数据表和Nvivo2.0编码软件上进行，对问卷结果的一致性分析采用SPSS13.0软件包进行. 　　2结果 　　2.1专家评判确定的公文资料的测评维度按照对职务胜任的要求，经过Delphi专家评判，确定了11份公文资料（测评项目）所能测评的维度（表1）. 4名专家评判上述11份资料（项目）在维度上进行区分度5等级评分，然后采用肯德尔和谐系数校正公式计算评分一致性系数［8］，Wc=0.808（0.05）. 达到对专家评定一致性的要求. 　　2.2编码者内部一致性计算每两名编码者对40份随机抽样答卷资料的质化编码一致性，最低编码一致性系数为0.767，最高编码一致性系数为0.933，平均编码一致性系数为CAi=0.850. 　　2.3质化编码结果内容限于篇幅这里仅列出101号公文资料的开放性质化编码结果，即文件编号1－01；一级编码条目为“根据任务的轻重缓急确定工作次序，组织各种指向结果的行动以