《人工智能通识与应用》课件——任务7.1 文本数据分析工具.pptxVIP

任务7.1文本数据分析工具Python数据分析

学习目标及重难点学习目标：了解常见的文本数据分析工具NLTK的下载安装素养目标：文本数据分析工具的安装部署学习重点：文本数据分析工具的安装部署

目录学习内容1.了解常见的文本数据分析工具2.NLTK的安装部署

01常见的文本数据分析工具

1.常见的文本数据分析工具自然语言处理（NLP）研究计算机和人之间如何进行有效通信，文本类型的数据在NLP领域占比很大。自然语言种类繁多，自身具有半结构的特点，所以针对不同类型需分别处理。常用的有处理英文的NLTK库。

1.关于NLTKNLTK为超过50个语料库和词汇资源提供易于使用的接口，以及一套用于分类、标记化、词干化、解析和语义推理的文本处理库。下表是NLTK常用模块

02NLTK安装部署

2.安装NLTK在终端使用pip命令直接安装Anaconda默认已经安装NLTK（没有语料库）pip?install?-U?nltk

2.安装NLTK语料库NLTK库中附带了许多语料库、玩具语法、训练模型等，完整的信息发布在/nltk_data/上。安装单独的数据包或下载全部的数据包，需要在JupyterNotebook（或者管理员账户）中执行以下操作nltk.download()#打开NLTK下载器

2.安装NLTK语料库在打开的NLTK下载器窗口选择全部下载还是部分下载，全部