意义群落测定在知网机译系统中的应用.PDFVIP

意义群落测定在知网机译系统中的应用 董强，董振东，郝长伶 HowNet Technologies Inc. Email:{dongqiang, dzd, support}@ 摘 要： 本文是《知网机译系统中的语义计算》的姊妹篇。本文提出和讨论了一种与被称为与意义群落相关 的歧义的消除的方法和技术，以及它在机器翻译系统中的应用。该方法和技术被称为意义群落测定（Sense Colony Testing，SCT）。该方法是基于知网的，是英中双语的。它处理的文本可以是超句的。它可以独立运 行，并作为其他类型的语言处理系统的应用工具。本文概要地说明了意群测定的原理， 介绍了它的组成部 分以及实现方法，以及机器翻译系统应用此工具的适宜时机。在最后一节的讨论中，作者探讨了 SCT 所要涉 及的特征的深度和精细度。 关键词：自然语言处理，知网，机器翻译，意义群落测定，词义消歧，消除歧义 Sense Colony Testing in HowNet MT System Qiang Dong, Zhendong Dong, Changling Hao HowNet Technologies Inc. Email:{dongqiang, dzd, support}@ Abstract: This paper is a companion piece of “Semantic computing in HowNet MT system”. In terms of the relatedness to syntax, the ambiguity can be roughly divided into two types: syntax-related and non- syntax-related. The latter is closely associated with the discourse and topics. This paper proposes and discusses an original method and technique for solving the latter type of ambiguity, which is called sense-colony-related type. The technique is named Sense Colony Testing, SCT, which is wholly based on HowNet and can be operated bilingually, and can process text-level discourse. The paper describes SCT’s linguistic principle and technical mechanism, and depicts the SCT as a tool used in HowNet machine translation, Lastly in the section of discussion the paper demonstrates the fineness of features that a NLP system have to employ.. Keyword: NLP, HowNet, machine translation, sense colony testing, WSD, disambiguation 1．引言 30 多年前，在研发我们最初的机译系统的时候，就一直为这样一个句子里的一种歧义的 消解而苦恼：“When I got to the bank, I found I didnt bring the fishing rods.”句中的“bank”， 在我们具有基本常识的人们看起来是很容易判定的。想着要带上钓鱼竿去的地方，自然应该 只能是“岸边”，而几乎不可能是“银行”，这是常识。当时研发的机译系统是基于规则的。 如果就