AI与大数据分析技术及方法.docxVIP

AI与大数据分析技术及方法

目录

内容综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

1.1研究背景与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

1.1.1时代发展需求．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

1.1.2技术变革推动．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．9

1.2核心概念界定．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．11

1.2.1人工智能概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

1.2.2大数据分析解读．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

1.3主要研究内容．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．17

1.3.1技术体系框架．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

1.3.2应用方法探讨．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．23

1.4研究方法与结构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．24

1.4.1研究思路概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．26

1.4.2文献综述方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．29

人工智能核心技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．30

2.1机器学习算法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．31

2.1.1监督学习模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．33

2.1.2无监督学习模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．39

2.1.3强化学习机制．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．42

2.2深度学习框架．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．44

2.2.1卷积神经网络．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．46

2.2.2循环神经网络．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．49

2.3自然语言处理技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．50

2.3.1语言模型构建．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．52

2.3.2情感分析技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．54

2.3.3机器翻译方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．57

2.4计算机视觉技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．58

2.4.1图像识别方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．60

2.4.2目标检测技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．62

2.4.3图像生成技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．65

大数据分析方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．66

3.1数据采集与预处理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．67

3.1.1多源数据获取．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．69

3.1.2数据清洗技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．70

3.1.3数据集成方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．72

3.2数据存储与管理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．74

3.2.1数据仓库架构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．75

3.2.2数据湖技术．．．．．．．．．．．．