人工智能导论(第2版)课件 项目6自然语言处理.pptx

人工智能导论(第2版)课件 项目6自然语言处理.pptx

自然语言处理;CONTENTS;01;;02;项目思维导图;03;;04;;05;自然语言处理的典型应用;智能文本分析的流程;(1)获取原始文本:资料整理、网上下载抓取

(2)文本预处理:数据清洗、分句、分词、词性标注

(3)特征提取:词袋模型、TF-IDF、词向量

(4)模型训练与输出:TextCNN等模型实现文本分类,生成智能文本分析报告;(a)小程序首页(b)输入文本(c)命名实体识别(d)形成文本摘要

智能文本分析小程序界面;数据清洗:删除或更正错误、不完整、格式有误、多余的数据,如中文文本中的数字、英文、标点等非常规字符,可使用正则表达式处理

分句

文档评论(0)

1亿VIP精品文档

相关文档