一种基于认知情景框架的文本分类方法.pdfVIP

一种基于认知情景框架的文本分类方法掌 李月伦1李湘2常宝宝1袁毓林2 1 1北京大学计算语言学研究所，北京，10087 2北京大学中文系，北京，100871 教育部计算语言学重点实验室 摘要：在文本分类领域，常用的特征选择方法(如文档频率)是基于概率统计信息的．本文从一个全新的角度， 即基于认知情境的语义框架的角度进行特征选择，这种方法可以较准确地抓住文本类别的特征，对提高分类精度 与分类效率起到促进作用。由手基于机器学习的文本分类方法近年来得到了广泛的关注与快速的发展，本文运用 最大熵分类器，以“罢餐”类文本为例进行文本分类实验，召回率可达96．8％． 关键词：认知情境语义框架最大熵文本分类 AText i zati onMethodBasedon i ti ve Categor Cogn SI tuatI OnS Li Yulin Yuelun,LiXiang，ChangBaobao，Yuan Institute ofComputationalLinguistics,PekingUniversity,Be洳岛100871 usedfeature as Abstract：InthefieldofText common selectionmethodssuchthedocument Categorization,the frequency arebasedon andStatiStiCS．Inthis abrandnew selectfeaturesbaseon and probability paper,from perspective,we cognitive can can the semanticframework．Thismethod thecharacteristicsoftheclassification grasp accurately,whichimprove classificationand theclassificationmethodmachine have widely accuracyefficiency．Because using learninggained attention usemaxinlu／n classifierandtake as to sometext and the“Snm(e，’texts do usage,we entropy example therecallcanachieve96．8％． categorizationexperiments,which situations,semantic丘ame．maximum Keyword：cognitive entropy,textcategorization 1引言 本判定为预先定义好的类别Pl。 中文文本分类方法