基于归一化编辑相似度距离的机器翻译评测方法.pdfVIP

基于归一化编辑相似度／距离的机器翻译评测方法l 张丽云李玉鉴 ．， 北京市多媒体与智能软件技术重点实验室，北京工业大学计算机学院，100022 Email：didal 227@emails．bjut．edu．ca 摘要：为了对机器翻译系统进行更合理的自动评测，本文参照一种新的编辑距离归一化技术，提出了 归一化编辑相似度／距离(NES／NED)的机器翻译评测方法。该方法不仅在理论上比WER方法更合理，而 且实际应用中也比WER方法更接近人工评测的可理解度分数。 此外，NES／NED的评测结果与人工评测的相关性也不亚于BLEU和NIST方法。 WER 关键词：自动评测人工评测编辑距离NES／NED Machine TranslationEvaluationMethodBasedon Normalization Edit Similarity／Distance ZhangLiyun，LiYuiian ofMultimediaand Software BeijingMunicipalKeyLaboratory IntelligentTechnology, of Scienceand of CollegeComputer Technology,BeijingUniversityTechnology, l00022．China Beijing Abstract：Intomore anew order evaluatemachinetranslation reasonably systems，thispaperproposes machinetranslationevaluation isbasedonanewnormalization method，namely,‘‘NES／NED”method，which ofeditdistance．Themethodisnot morereasonablethanWERin alsoclosertohuman technique only theory,but assessmentsoftranslationthanWERin scoresarenotlesscorrelated quality application．Additionally,NES／NED tohumanassessmentsthanBLEUandNISTscores． Words：automatic Key evaluation，humanevaluation，editdistance，NES／NED，WER 1．引言 随着机器翻译技术的研究与发展，出现了多种机器翻译评测方法…_21，其中BLEU、NIST 和wER是三种比较著名和常用的方法【3H51。BLEU是基于n元语法准确率几何平均值的方法， 得分越高越好，它的基本思想是在统计翻译系统给出的候选译文和参考译文中共现n元词的 个数和精度的基础上计算翻译系统的评价分数。NIST是基于n元语法准确率算数平均值的方 法，得分越高越好，它是在BLEU方案基础上提出的另外一种基于共现行元词的统计方案。WER 是基于编辑距离的最小单词错误率方法，得分越低越好，它本质上是通过计算候选译文到参 考译文之间的平均编