多特征交叉融合在语音情感识别中的应用方法.docxVIP

多特征交叉融合在语音情感识别中的应用方法

目录

文档简述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

1.1研究背景与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

1.2国内外研究现状．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

1.3主要研究内容．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

1.4技术路线与论文结构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

相关理论与基础技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．9

2.1语音情感识别基本概念．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

2.2语音信号处理基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

2.2.1语音信号表示．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．13

2.2.2语音特征提取方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．15

2.3情感计算理论．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．16

2.4机器学习与深度学习算法概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．18

基于多特征的语音情感特征提取．．．．．．．．．．．．．．．．．．．．．．．．．．．19

3.1特征提取的重要性．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．20

3.2声学特征提取与分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．21

3.2.1常用声学参数选取．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．22

3.2.2高级声学特征构造．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．24

3.3频谱域特征分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．27

3.3.1频谱特征表示．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．28

3.3.2频谱动态特征提取．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．29

3.4非声学特征考虑．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．30

3.4.1语用特征引入．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．31

3.4.2发声特征参数分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．33

多特征交叉融合策略研究．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．38

4.1特征融合的必要性分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．39

4.2特征融合方法分类．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．40

4.2.1基于特征的融合方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．41

4.2.2基于模型的融合方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．42

4.2.3基于决策的融合方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．44

4.3交叉验证方法在融合策略评估中的应用．．．．．．．．．．．．．．．．．．．．48

基于融合特征的语音情感识别模型构建．．．．．．．．．．．．．．．．．．．．．49

5.1情感识别模型体系结构设计．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．50

5.2基于传统机器学习的识别模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．51

5.2.1支持向量机应用．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．52

5.2.2神经网络模型构建．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．54

5.3基于深度学习的识别模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．59

5.3.1深度神经网络架构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．60

5.3.2卷积神经网络应用．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．62

5.3.3循环神经网络