统计机器翻译中短语切分新方法.pdfVIP

  • 11
  • 0
  • 约 6页
  • 2017-06-09 发布于湖北
  • 举报
06 第三届学生计算语言学研讨会 统计机器翻译中短语切分的新方法 1 1 1 何中军 ,刘群 ,林守勋 (1.中国科学院计算技术研究所,北京 100080) 摘 要: 基于短语的统计机器翻译是目前主流的一种统计机器翻译方法,但是目前基于短语 的翻译系统都没有对短语切分作专门处理,认为一个句子的所有短语切分都是等概率的。本文 提出了一种短语切分方法,将句子的短语切分概率化:首先,识别出汉语语料库中所有出现次 数大于 2 次的词语串,将其作为汉语短语;其次,用最短路径方法进行短语切分,并利用 Viterbi 算法迭代统计短语的出现频率。在 2005 年 863 汉英机器翻译评测测试集上的实验结果(bleu4 ) 是:0.1764 (篇章),0.2231 (对话)。实验表明,对于长句子(如篇章),短语切分模型的加入 有助于提高翻译质量,比原来约提高了

文档评论(0)

1亿VIP精品文档

相关文档