计算机模拟病例考试重复使用可靠性研究.doc

PAGE  PAGE 4 计算机模拟病例考试重复使用的可靠性研究 毕洪然，左天明，孙宝志 （中国医科大学医学教育研究中心，辽宁 沈阳 110001） [摘要]中国医科大学是首个在国内开发并使用计算机模拟病例（Computer-based Case Simulation, CCS）这种考试方式的，由于考生数目较大，开发病例也比较复杂，所以考试病例往往重复使用。本研究验证了在中国医科大学CCS考试中重复使用病例，并未对考试的客观性和公正性产生显著影响，CCS考试具有较高的客观性、公正性以及可靠性。 [关键词] CCS考试；重复；可靠性 计算机模拟病例考试（Computer-based Case Simulation, CCS）是一个动态的、人机交互的对患者疾病状况的模拟[1]。病例一开始，在屏幕上会呈现患者的病情简介和来诊时的病例信息，考生可以通过采集病史、体格检查、制定医嘱来完成对患者进行的诊断和治疗。 中国医科大学自2001年开始进行CCS考试系统的开发，学习和借鉴国外CCS经验，独立研究开发了适合我国国情的CCS考试系统。自2002年开始，中国医科大学就一直应用CCS考试，它是中国医科大学临床专业毕业生毕业综合考试的重要组成部分。 CCS考试这种基于表现的评价法是很复杂的[2]，而且很难开发，需要很多人力与物力方面的支持，而中国医科大学每年考生较多，计算机病例开发的复杂性导致新病例的开发速度远远赶不上考生的数量，所以在每次的CCS考试中，病例往往是重复使用的，这样就有可能对整个考试的客观性和公正性产生质疑，本研究旨在验证CCS考试的重复使用的可靠性。 一、对象与方法 （一）研究对象 本研究以中国医科大学2010年参加毕业综合考试的2005级五年制临床医学专业本科考生作为研究对象，共471人。 （二）研究方法 1.考试方法 学校在于考试前2个月将考试的形式和内容，以及演示说明发布在教务处网站上，供考生了解和练习。CCS考试共有两站，第一站为公共病例，即所有考生都要测试的病例，第二站为随机病例，即考生在我们所设置的几个病例中随机抽取一个进行作答。在本次考试中，共应用了9个模拟病例，其中1个为公共病例。 考试时间共持续16天，每日共有上午、下午和晚上3组考生参加考试，每组10人，即每天30名考生参加考试。考试顺序是按照实习地点随机分组的。 2.统计方法 考生的CCS考试成绩最后导入Excel数据表中，调查问卷采用Epidate建立数据库，输入数据，并用双录入方法对数据库进行核查。所有数据录采用SPSS13.0软件进行统计分析。 3.质量控制 考试顺序是根据实习地点的不同随机分组的，为减少系统误差，监考老师严肃考场纪律，严格监考，以保证考生独立完成考试题目。调查问卷经过专家论证。CCS考试的评分为计算机程序自动评分，准确性极高，由此产生的系统误差极小。本研究样本量足够，且各样本独立。 二、结果 （一）CCS考试的基本情况 在2010年五年制CCS考试中应用的9个病例包括3个内科病例，4个外科病例，2个妇科病例，2个儿科病例，9个病例编号分别为公共病例2305号，随机病例1107号、1110号、2303号、2304号、2324号、2404号、2415号、2416号。由于考虑到样本量关系，在对考试成绩进行统计分析时，公共病例和随机病例均按考试顺序每四天一组。 （二）CCS考试成绩分析 每个病例得分均由计算机程序自动计算，CCS考试的总分、各病例分数都以百分制计， CCS总分是将考生所考的两个病例的百分制总分所得平均数，见表1。 表1，CCS考试总分 分组人数平均分标准差95% 可信区间最低分最高分下限上限112047.5411.4145.4849.6022.5074.00212049.5710.4147.6951.4521.0072.00311950.7712.8548.4453.1118.0078.00411247.538.7245.9049.1622.5070.00总计47148.8711.0347.8749.8718.0078.00*P0.05 （三）分别对CCS总成绩，以及各个病例分数进行方差分析，结果如表2， CCS总成绩、1107号病例、1110号病例、2303号病例、2304号病例、2324号病例、2404号病例、2415号病例平均分数在各组之间均显示无显著性差异；公共病例和2416号病例方差分析显示有显著性差异。根据方差分析的结果，进一步对公共病例和2416号病例进行Scheffe检验，结果显示公共病例第三组成绩明显低于第四组，2416号病例第四组成绩明显低于其他三组。 表2， C