基于自然语言处理的文本分析与应用研究.docxVIP

基于自然语言处理的文本分析与应用研究

目录

内容概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

自然语言处理基础理论．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

2.1语言学的相关概念．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

2.2自然语言处理的定义与目标．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

2.3自然语言处理的主要任务．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

文本预处理技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．11

3.1文本清洗与标准化．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．11

3.2停用词处理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

3.3词性标注与词形还原．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．13

文本表示方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

4.1词袋模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

4.2