基于双向匹配法和特征选择算法的中文分词技术研究.pdfVIP

第 36 卷 第 1 期 昆明理工大学学报( 自然科学版) Vol． 36 No. 1 2011 年 2 月 Journal of Kunming University of Science and Technology ( Natural Science Edition) Feb． 2011  doi: 10 ． 3969 /j ． issn． 1007 － 855x． 20 11． 0 1． 0 10 基 于双 向匹配法和特征选择 算 法 的中文分词技术研究 1 2 3 ， ， 麦范金 李东普 岳晓光 ( 1． ， 54 1004 ; 2 ． ， 54 1004 ; 桂林理工大学 图书馆 广西 桂林 桂林理工大学 信息科学与工程学院 广西 桂林 3． ， 532200) 广西民族师范学院 数学与计算机科学系 广西 崇左 : ， ． 摘要 传统的双向匹配算法虽然能够发现歧义现 象 但是却不能解决歧义 问题 为 了更好地进行 ， ， ， 歧义消解 提出 了一种基 于双向匹配法和特征选择算 法的 中文分词技术 通过积 累的语料库 设 ． ， 计并 实现了一个基 于两种方法的分词 系统 该 系统的实验结果表明 基 于双向匹配法和特征选择 算法的 中文分词技术 比传统方法的效果要好． : ; ; 关键词 双向最大匹配 特征选择算法 中文分词 中图分类号: TP391． 1 文献标识码: A 文章编号: 1007 － 855X( 20 11) 0 1 － 0047 － 05 Research on Chinese Word Segmentation Based on Bi － Direction Marching Method and Feature Selection Algorithm 1 2 3 MA I Fan-jin ，LI Dong-pu ，Y UE Xiao-guang ( 1． Library ，Guilin University of Technology ，Guilin ，Guangxi 54 1004 ，China; 2 ． College of Information Science and Engineering ，Guilin University of T