文本数据挖掘与Python应用 课件 刘金岭 第1--3章 绪论、文本切分及特征词选择-- 文本表示.ppt

文本数据挖掘与Python应用 课件 刘金岭 第1--3章 绪论、文本切分及特征词选择-- 文本表示.ppt

2.4文本特征词选择6)文档频法文档频法选择文本特征词时仅考虑文本特征所在的文档数,如果某个文本特征词在文本集中所在的文档数达到一个事先给定的阈值,则留下该文本特征,否则删除。该方法只需将词换为文档即可。7)χ2统计量在统计学中,χ2统计量用于检验两个变量的独立性,也用于表征两个变量间的相关性,它同时考虑了特征词出现于不出现的情况。对于特征词w和类别ci,其χ2统计量的计算公式为:2.4文本特征词选择2.综合评估方法独立评估方法在选择文本特征词时,它们仅依靠权重作为选择的标准

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档