_图书情报作_国内中文自动分词技术研究综述.docVIP

国内中文自动分词技术研究综述* 奉国和1 郑伟2 1华南师范大学 经济管理学院，广州 510006 2河北北方学院 理学院，张家口 075000 〔摘要〕分词是文本自动分类、信息检索、信息过滤、文献自动标引、摘要自动生成等中文信息处理的基础与关键技术之一，中文本身复杂性及语言规则的不确定性，使中文分词技术成为了分词技术中的难点。论文全面归纳中文分词算法、歧义消除、未登录词识别、自动分词系统等研究，总结出当前中文分词面临的难点与研究热点。 〔关键词〕中文分词 分词算法 歧义消除 未登录词 分词系统 〔分类号〕G354 Review of Chinese Automatic Word Segmentation Feng Guohe1 Zhen Wei2 1School of Economics Management, South China Normal University, Guangzhou 510006 2College of Science, Hebei North University, Zhangjiakou 075000 [Abstract] Word segmentation is one of the key technology for natural language processing such as text auto-classification