第十一届全国机器翻译研讨会（CWMT2015）评测大纲.PDF

第十一届全国机器翻译研讨会（CWMT2015）评测大纲 CWMT2015 中国科学院自动化研究所 中国科学院计算技术研究所 机器翻译评测小组 一 引言. 第十一届全国机器翻译研讨会（CWMT2015 将于2015年9月23 日至25 日在中国科学院合肥物质科 学研究院举行。根据惯例，本次研讨会将继续组织统一的机器翻译评测。 CWMT2015机器翻译评测方案与上届评测 （CWMT2013 相比有较大变化：本次评测取消了上届评 测中的灰箱测试和人工评测，增加了双盲评测（DoubleBlindEvaluation）项目。在双盲评测中，评测组织 方将会选择一个语言对进行加密编码，呈现给各个参评单位的将是加密后的双语对照数据和句法树。这次 的双盲测试将最大限度地抛开词法分析、句法分析、命名实体翻译等预处理和后处理对翻译的影响，将最 大限度地关注翻译模型本身的问题。此外，评测组织方将不再提供评测项目的“基线系统（BaselineSystem 及相应的关键步骤中间结果文件。希望通过这次评测能促进参评单位间的实质性交流和机器翻译研究及技 术的发展。我们期待着更多的新人和成熟的研究团队能参加到这个评测中来。 本次评测的组织信息如下（三个以上的并列项以汉语拼音为序 ： 评测主办机构： 中国中文信息学会 评测组织单位： 中国科学院自动化研究所 中国科学院计算技术研究所 评测合作单位： 东北大学 东芝（中国）研究开发中心 哈尔滨工业大学 南京大学 内蒙古大学 青海师范大学 厦门大学 新疆大学 中国科学院新疆理化技术研究所 评测资源提供单位： 北京大学 点通数据有限公司 东北大学 哈尔滨工业大学 内蒙古大学 青海师范大学 西北民族大学 西藏大学 厦门大学 新疆大学 1 中国科学院合肥智能机械研究所 中国科学院计算技术研究所 中国科学院新疆理化技术研究所 中国科学院自动化研究所 评测委员会主席： 汪 昆（中国科学院自动化研究所 姜文斌（中国科学院计算技术研究所 评测委员会委员： 曹海龙（哈尔滨工业大学 头旦才让（青海师范大学 陈毅东（厦门大学 黄书剑（南京大学 麦热哈巴•艾力（新疆大学 海银花（内蒙古大学 肖 桐（东北大学 杨雅婷（中国科学院新疆理化技术研究所 张大鲲（东芝（中国）研究开发中心 张家俊（中国科学院自动化研究所 赵红梅（中国科学院计算技术研究所 有关研讨会的更多信息请参见以下网址： /CWMT2015/ 有关评测的更多信息请参见以下网址： /evalshow.php?id=2028 二.评测项目 本次评测包含6个评测项目，我们将为各个评测项目的参评单位提供相应的训练语料和开发语料。具 体项目设置如表1所示。 表1CWMT2015 评测项目表 序号 项目代号 评测项目名称 语种 领域 1 CE 汉英新闻领域机器翻译 汉语英语 新闻领域 2 EC 英汉新闻领域机器翻译 英语汉语 新闻领域 3 MC 蒙汉日常用语机器翻译 蒙古语汉语 日