基于协同聚类的两阶段文本聚类方法研究.pdfVIP

基于协同聚类的两阶段文本聚类方法研究 王明文‘2，付剑波2，罗远胜3，陆旭3 (1．江西师范大学计算机信息工程学院，江西南昌。330022；2．江西财经大学信息管理学院，江西南昌， 330013： 3．江西财经大学现代教育技术中心，江西南昌，330013) 摘要：作为…种自然语言处理应用，文本聚类具有高维和语义相关的特点，属于无监督的学习方法。但由于 缺乏类别信息，_IiYO-2应用于文本分类的有监督的特征选择方法很难直接应用于文本聚类。为了将语义信息用于 文本聚类和有效地进行特征选择，本文提出了一种基于协同聚类的两阶段文本聚类方法。该方法分别对文档和 特征进行聚类从而得到特征与主题之间的语义关联关系，然后利用此关系来相互调整彼此的聚类结果；聚类分 两阶段进行，第一阶段对训练集进行仇同聚类，第二阶段利用第一阶段的聚类结果进行有监督的特征选择，然 后以所选特征对测试集进行协同聚类。实验结果表明，利用特征与主题之间的语义关联关系能有效地提高聚类 效果。同时，通过两阶段聚类方式不仅能有效地进行特征选择，而且聚类效果得到很大提高。奉文最后还利用 特征之问的语义关联关系在进行特征选择之后进行特征扩展，使聚类效果得到了迸一步的提高。 关键词，文本聚类，协同聚类，特征选择，特征扩展 TextCI usteri based013OoI I aborati ve Two—Stage ng ’0l usteri ng Lu03，XuLu3 MingwenWan91,2，JianboFu2，Yuansheng Informationand Normal (I．School University,Nanchang，330022； ofcomputer Engineering，Jiangxi 2．．Schoolofinfommtion Management．JiangxiUniversity Education and 3．Modem ofFinance TechnologyCenter．JiangxiUniversity Economics，Nanchang，330013) has Abstract：Asan ofNatural thecharacteristicsof application Clustering high LanguageProcessing，Text and dimensionssemanticrelations．IttO method．However,Somesupervised belongsunsupervisedlearning be tOit duetothe featureselectionmethods usedintextclassificationCan’t of successfully applied unavailability