统计机器翻译删词问题研究.pdfVIP

第 28卷 第 5期 中文信息学报 Vo1．28，No．5 2014年 9月 J0URNALOFCHINESEINFORMATION PROCESSING Sep．，2014 文章编号 ：1003—0077(2014)05—0125—08 统计机器翻译删词 问题研究 李 强 ，何燕龙。，栾 爽。，肖桐 ，朱靖波 (1．东北大学 信 息科学与工程学院，自然语言处理实验室 ，辽宁 沈阳 110819； 2．中国民族语文翻译 中心 ，北京 100080； 3．辽宁大学 外 国语学院，辽宁 沈 阳 110036；4．杭州雅拓网络技术有 限公司，浙江 杭州 310012) 摘 要 ：该文对基于短语 的统计机器翻译模型的删词 问题进行研 究与分析 ，使 用人工评价 的方式将删词错误分为 3类。该文通过两种方法，即基于频次的方法和基于词性标注的方法，对源语 言句子 中关键词汇进行识别 。通过对 传 统的短语对抽取算法中引入源语 言对 空关键词汇的约束来缓解删词错误 问题 。 自动评价方法 以及人工评价方 法证 明，该方法在汉英翻译任务 以及英汉翻译任务 中显著的缓解 了删词错误 问题 ，同时得到一个精 简的短语翻 译表 。 关键 词 ：统计机 器翻译 ；删 词 问题 ；人 工评 价 中图分类号 ：TP391 文献标识码 ：A Researchon W ordDeletion IssueinStatisticalM achineTranslation LIQiang ，HEYanlong ，LUAN Shuang。，XIAO Tong ，ZHUJingbo (1．NaturalLanguageProcessingLaboratory，CollegeofInformationScienceandEngineering， NortheasternUniversity，Shenyang，Liaoning 110819，China； 2．ChinaEthnicLanguagesTranslationBureau，Beijing100080，China； 3．CollegeofForeignLanguage，LiaoningUniversity，Shenyang，Liaoning110036，China； 4．HangzhouYatuoNetworkTechnologyCo．；Ltd．，Hangzhou，Zhejiang310012，China) Abstract：Thispaperaddressestheworddeletion issueinphrase—basedmachinetranslation．Afteraccountingword deletionerrorsforthreecausesfrom thepersectiveofhumanreading，weproposetO introduceconstraintsonuna— lignedwordsofsourcelanguageinphraseextractiontOdealwiththisissue．Twomethodsarepresentedforthede— signoftheconstraints，includingafrequency-basedmethodandapart—of-speech—basedmethod．Automaticandhu— manevaluationsdemonstratepromisingimprovementsintranslationqualityonboththeChinese—t‘o—。Englishandthe English-to—Chinesetranslationtasks，onthebasisofamorecompactphr