结合语义与统计的特征降维短文本聚类.pdf

第38 卷 第22 期 计 算 机 工 程 2012 年11 月 Computer Engineering November 2012 Vol.38 No.22 文献标识码文献标识码：：A 文献标识码文献标识码：： 中图分类号中图分类号：：TP391 文章编号文章编号：：1000——3428(2012)22——0171——05 中图分类号中图分类号：： ·人工智能及识别技术·人工智能及识别技术·· 文章编号文章编号：： —— —— —— ··人工智能及识别技术人工智能及识别技术·· 结合语义与统计的特征降维短文本聚类结合语义与统计的特征降维短文本聚类 结合语义与统计的特征降维短文本聚类结合语义与统计的特征降维短文本聚类 1,2 3 2 杨婉霞杨婉霞 ，孙理和，孙理和 ，黄永峰，黄永峰 杨婉霞杨婉霞 ，，孙理和孙理和 ，，黄永峰黄永峰 (1. 甘肃农业大学工学院，兰州 730070 ；2. 清华大学电子工程系，北京 100084 ；3. 西北师范大学外国语学院，兰州 730070) 摘摘 要：要：为解决文本聚类时文本的高维稀疏性问题，提出一种语义和统计特征相结合的短文本聚类算法。该算法通过语义词典对词汇的语 摘摘 要要：： 义相关性分析实现一次降维，结合统计方法进行特征选择实现二次降维，并融合二次降维特征实现短文本聚类。实验结果表明，该算法具 有较好的短文本聚类效果和效率。 关键词关键词：特征选择： ；聚类；短文本；向量空间模型；语义；降维 关键词关键词：： Feature Dimension Reduction Short Text Clustering Combined with Semantic and Statistics 1,2 3 2 YANG Wan-xia , SUN Li-he , HUANG Yong-feng (1. College of Technology, Gansu Agricultural University, Lanzhou 730070, China;