计算机辅助普通话水平测试命题说话项评分误差控制.pdf

第 1 1 卷 第 期 石家庄铁道大学学报（社会科学版） V o l.ll No. 2017 年 6 月 Journal of Shijiazhuang Tiedao UniversityCSocial Science Edition) Jun. 2017 文 章 编 ： 2095 - 0 3 6 5 ( 20 1 7 ) 0 2 - 0 0 6 8 - 0 4 计算机辅助普通话水平测试“命题说话” 项评分误差控制 杨会永， 张 宁 (石家庄铁道大学人文学院，河北石家庄 0 5 0 0 4 3 ) 摘 要 ：国 家普通话水平测试“命题说话”项主观性较强，评测误差不容易控制。设计开发 一套计算机软件，对评测员的测评工作进行实时监控，力图将由主观性导致的测评误差控制在 最小程度，监控主要从测试员试评误差控制、测试员与测试员集体之间一致性对比误差控制、 测试员本人一致性误差控制、不同评测点之间误差控制、管理员抽查监控误差控制等六个方面 进行。这套程序将对目前正在使用的评测系统产生积极的辅助作用。 关键词 ：普 通话；命题说话；水平测试；误差控制 中 图 分 类 号：G 434 文 献 标 志 码 ： A DOI : 10. 13319/j. cnki. s jz td d x x b s k b . 20 17. 02. 13 目前国内计算机辅助普通话水平测试所使用 我们对目前“命题说话”项的评分误差控制主 的是科大讯飞公司研制开发的“国家普通话水平 要是研究开发了一套计算机辅助普通话水平测试 智能测试系统”，该系统基于国家普通话水平测试 “命题说话”项人工评分误差控制系统，该系统能 大纲，可较准确地对考生“命题说话”之外的三个 对评测员的评测结果进行实时监控，能将由于评 题型进行自动评测。“目前的语音评判技术还无 测员主观性导致的评测误差控制在评测过程 法对考生在没有文字凭借的情况下的第4 题说话 之中。 项目上的普通话水平进行评判”[1]。这样，第 4 题 ―、测试员试评误差控制 “命题说话”则由该系统录音后由测试员基于该系 统网络平台在网上进行评分，这较之以前的人工 “命题说话”项评分标准中，“语音标准程度” 集中评测有很多的方便之处。但须承认的是，由 较其他五项其主观性最强，该项评分共分为六档， 于“命题说话”项的评分受评测员自身水平的影响 评测员的评分误差多在这项中出现。为使评测员 较大，具有较强的主观性，故对考生的评分存在程 对六档评分标准有比较准确的把握，我们设计从 度不等的误差。所以，如何有效减小“命题说话” 往年“命题说话”项语音数据中每档选取 5 0 人的 项的评分误差，真正测出考生实际的普通话水平， 说话数据(评分确定比较准确的），通过排列组合 切实提高普通话水平测试的公信度，已成为计算 编排 1 0 0 组试评题目，每组 5 个说话语料，每组题 机辅助普通话水平测试要解决的重要问题之一。 目要照顾到“语音标准程度”的不同档次，即一组 我们结合自身多年的普通话测试经验，并学习借 题目尽可能显示多类型语音面貌。如果时间允 鉴国内一些水平考试的有效做法，对计算机辅助 许 ，可以多编排几个说话语料，因为“当其样本容 普通话水平测试“命题说话”项的评分误差控制做 量增大时，测量的概化系数 E P2 和可靠性指数 c