基于短语匹配中文分词消歧方法.pdfVIP

第钙卷第3期 吉林大学学报(理学版) V01．48No．3 of 2010年5月 JournalJilin Mav2010 University(ScienceEdition) 基于短语匹配的中文分词消歧方法 姚继伟，赵东范 (吉林大学计算机科学与技术学院，长春130012) 摘要：在短语结构文法的基础上，提出一种基于局部单一短语匹配和语义规则相结合的消歧 方法．通过增加短语间的右嵌套规则和采用有限自动机的实现方式，解决了短语规则中存在 冗余项的问题，提高了短语匹配效率和歧义消除类型的针对性．实验结果表明，该消歧方法 的平均消歧率约为98％，优于一般未考虑词语间语法和语义消歧模型的处理效果． 关键词：中文分词；短语匹配；歧义字段；消歧方法 中图分类号：TP391文献标志码：A 文章编号：1671-5489(2010)03-0427-06 Methodin Word Chinese Disambiguation Segmentation BasedonPhraseMatch YAO Ji·wei，ZHAO Dong-fan Scienceand of Technology，JilinUniversity，Changchun130012，Ch／na) (CollegeComputer authors aword methodbasedonlocal matchand Abstract：The presenteddisambiguation singlephrase rulesvia methodcansolve ofredundant semantic the grammar．The the exploringphrase—structured problem itemsexistedin and the and ofthe rules can phrase improvematchingefficiencydisambiguationpeainence kindsof nestedrulesbetween and the modeoffinite— ambiguitybyaddingright phrasesapplyingmatching automaton．The thatthe of reachesabout98％whichis experiment average disambiguation proves accuracy thoseof without the andsematicbetweenwords． betterth