中文信息学报机器翻译评测的新进展.PDFVIP

中　文 　信 　息 　学 　报 第 17 卷 第 6 期 　 JOURNAL OF CHINESE INFORMATION PROCESSING Vol 17 No6 文章编号 :1003 - 0077 (2003) 06 - 000 1 - 08 机器翻译评测的新进展 1 2 3 张 　剑 ,吴 　际 ,周 　明 ( 1 北京邮电大学 信息工程系 ,北京 　100876 ; 2 北京航空航天大学 计算机系 ,北京 　100083 ; 3 微软亚洲研究院 ,北京 　100080) 摘要 :机器翻译评测对机器翻译的研究和开发具有至关重要的作用 ,对其的研究一直是国内外机器翻译 界的重点课题 。本文首先全面地介绍了最近出现的而且受到极大关注的机器翻译评测技术 , 即 IBM 公司的 BL EU 机器翻译评测标准和 N IST 采用的机器翻译评测技术 。实验表明 , 自动翻译评测技术能够接近人工评 价 ,评测结果也是可接受的。因此 ,采用自动翻译评测技术能够给 自然语言处理的研究人员和开发人员带来 很大的便利性 。本文还展示了一个开放式的可扩展的自动翻译评测的平台 ,完全实现了BL EU 和 N IST 评测 标准 ,并做出了一定的改进使得该系统具有良好的使用性和可扩展性 。 关键词 :人工智能 ;机器翻译 ; 自动评测 中图分类号 : TP39 12 　　　文献标识码 :A The Improvement of Automatic Machine Translation Evaluation ZHAN G J ian1 ,WU J i2 ,ZHOU Ming3 ( 1Dept . of Info . engineering , Beijing Univer sit y of Post s and Telecommunications , Beijing 100876 ,China ; 2 Dept . of Comput . Sci Eng. , Beijing University of Aero . Astro . , Beijing 100083 ,China ; 3Microsoft Research Asia , Beijing 100080 ,China) Abstract :Evaluation plays a critical role in t he machine translation . The research of automatic machine translation e valuation is an urgent need for t he natural language processing researchers and develop ers. This p ap er briefly de scribes t he background of evaluation of machine translation and two important technology of automatic evaluation : BL EU and N IST metrics. Then , we present s some improvement s for t hese metrics by t he ideas from text retrieval , which is called TF IDFweighted metric . This met hod avoids t he shortcoming of BL EU metric and achieves a higher Fratio value . As a result , it can give a r