句酷网和冰果自动评分效度的对比实证研究.pdfVIP

第 33卷第 1期 阿 弘方学 学杯(社会科学版) Vo1．33NO．1 2017年 2月 JournalofHebeiNorthUniversity(SocialScienceEdition) Feb．2O17 “旬酷网和 “冰果自动评分效度的对 比实证研究 殷小娟 ，贾永华，林庆英 (闽江学院 外语 系，福建 福州 350121) 摘要 ：国内研究者还未对 “句酷 网”和 “冰果”这两个平 台的评分效度差异进行实证研究。对大学非英语专 业 3种题型作文文本 的分析结果表 明：“句酷 网”和 “冰果”的 自动评定成绩和人工评定成绩之间存在显著的正 相关关系，相关程度存在差异，两个平台对不同类型作文的评定成绩效度之间也有差异 。 关键词 ：句酷 网；冰果 ；自动评分 ；效度 ；作文题型 中图分类号 ：H 315 文献标识码 ：A 文章编号 ：2095—462X(2017)0卜0091一O6 网络出版地址 ：http：／／kns．cnki．net／kcms／detail／I3．1415．C1450．052．html 网络 出版时间：2017-02～2814：50 大数据时代为英语写作的教学提供 了大量辅助 代英语写作在线 自动评分系统的应用和评价亟待深 系统与工具 ，其中最受关注 的是英语作文的在线 自 入研究且意义深远 。 动评分系统。在 国外 ，美 国Noodletools公司开发 一 、 作文 自动评分研 究综述 的在线写作辅助系统可以提供记笔记 、写大纲、生成 参考文献清单以及独立或与 同伴合作写作等功能。 日常教学 中的作文批改任务对老师来说是非常 在中国，北京词网科技公司开发 的批改网以及浙江 繁重 的，反馈不及时也是英语写作教学中的常见问 大学外语学院和外研社与浙江增慧网络有限公司合 题。如何借助最新的科技成果提高英语作文的阅卷 作开发的 “冰果”软件 ，是 目前英语写作教学 中使用 效率 ，从而减轻教师的工作负担 ，同时提高学生的写 最多的两个平台，都可以为学生 的作文及时评分并 作热情成为国内外研究者的重要课题 。 提供词汇、语法和篇章等方面的实时在线反馈信息。 相 比而言 ，国外的作文 自动评分系统开发和研 这两个平台在帮助学生通过 “多写多练”提高英语写 究 比中国起步较早。美国杜克大学 1966年开发出 作能力和减轻教师批改作文等工作量 的同时，也储 第一套作文 自动评分系统 PEG(projectessaygrad— 存了大量和英语写作教学相关的数据。 er)，Valenti发现 “PEG最新实验结果与评卷人的评 “大数据”分析是最近几年的新兴事物 ，将它应 分在多元 回归相关性上达到0．87”_l3]，但 Kukich指 用在外语教育研究中更是鲜见。中国学者的探索性 出，“由于PEG采用对写作质量 的间接测量而很容 研究在这个领域起 到了前驱作用。王海啸率先指 易被写作者欺骗 ，比如写出更长 的文章”l4j。除此之 出，“大数据时代，大学英语写作应 以语言应用为教 外 ，国外较为成熟的自动评分系统还有 IEA(intelli— 学 目的，多角度认识作者、文本与读者之间的关系， gentessay assessor)、E～rater(electronicessayrat— 多维度地设计教学方案”r】]。钱文娟 以 “句酷网”为 er)以及 IntelliMetricTM 等。中国的相关研究相 例探讨了大数据时代高职英语写作 自动评分的新模 对滞后