商务分析与实验:数据预处理及分词技术应用.pdf

商务分析与实验:数据预处理及分词技术应用.pdf

1.数据预处理(去重,)

1)去重

解释:可以看到我们已经提取出去重的文档信息,且此文档为带有的监督型学习,且已

经做好分析。图中所有的content的为pos。

2)

解释:去除英文与数字我个人认为值得商榷,会将有关价格和参数等敏感型数据一同,

但他的作用是降低主体元素数字对于结果的影响,对于京东美的等字眼,同样也是文本内主

体词汇,对后续词云无意义,所以同样删去。

gsub()函数解释如老师的文档

2.分词、词性标注、去除停用词(jiebaR)

文档评论(0)

1亿VIP精品文档

相关文档