机器翻译测试大纲 - 欢迎来到中科院计算所自然语言处理组 .docVIP

机器翻译评测大纲 一、评测对象 本次评测的对象包括：汉－英、英－汉、汉－日、日－汉机器翻译系统中的核心技术。 二、评测内容 本次评测组织两种语料的评测，一种是篇章语料，一种是对话语料。领域是面向奥运的相关领域，包括体育赛事、天气预报、交通住宿、旅游餐饮等。 本次评测的评测指标包括译文质量和翻译速度。 三、评测方法 1. 评测方式 本次评测为现场评测。采用的是以人工评测为主，人工评测和自动评测相结合的方式。 人工评测方式是：由评测组织单位将各个评测单位提交的评测结果汇总在一起，然后用计算机随机打乱译文句子的排列顺序。再将所有译文句子提交给多位专家进行人工评测。将专家评测的结果汇总，用计算机还原成