情感语音识别研究综述.pptVIP

情感语音识别研究综述 导师：陶智 肖仲喆 研究生：沈燕 内容概要 课题背景及意义 情感语音研究综述 研究方向选择 课题背景及意义 语音是人类最有效、最自然的交流沟通手段, 除了包含语义信息外, 还携带有丰富的情感信息。 人们的情感包括生理上的感觉，认知以及人们的行为举止。 情感语音识别可应用于聋哑人学说话；电视调台；热线电话。 研究综述——涉及的问题 语音情感分类学 语音库 声学参量 分类方法 研究综述-语音情感分类学 情感语音并没有统一的模型 空间情感模型 情感轮等 离散情感模型 高兴，愤怒，悲伤，平静，害怕，厌恶 每类模型内部无定论 模型的选取依赖于应用 [1] 林奕琳,韦岗,杨康才,语音情感识别的研究进展.电路与系统学报,2007.12(1):第90-98页. 研究综述-语音库的选择 现有的情感语言库有很多 公开库，私有库，商用库 [2] I . S. Engberg and A. V. Hansen, “Documentation o f the Danish Emo-tional Speech Database ( DES),” Internal AAU report, Center for PersonKo mmunikation, Denmark, 1996. [3] F. Burkhardt, A. Paeschke, M. Rolfes, W. Sendlmeier, B. Weiss, A database of German emotional speech, in: Proceedings of the Interspeech 2005, Lissabon, Portugal, 2005, pp. 1517–1520. 名称 性质 语言 Berlin emotional database[2] 公开库 德语 Danish emotional database[3] 公开库 丹麦语 Natural 私有库 普通话 BabyEars 私有库 英语 研究综述-声学参量 情感语音的最佳特征：全局统计特征&局部特征 特征参数优化 多类特征组合 [4] M.E. Ayadi, M.S. Kamel, and F. Karray, “Survey on Speech Emotion Recognition: Features, Classification Schemes, and Databases,”Pattern Recognition, vol. 44, no. 3, pp. 572-587, Mar. 2011. 研究综述-情感语音的最佳特征 Speech Features Continuous Qualitative Spectral TEO-Based Pitch Duration Formants Voice quality: happy, tense, angry LPCC MFCC [5] Kim, E. H., Hyun, K. H., “Improved Emotion Recognition With a Novel Speaker-Independent Feature,” IEEE Transactions on Mechatronics, 2009, 14(3): 317-325. [6]H. Teager, Some observations on oral air flow during phonation, IEEE Trans. Acoust. Speech Signal Process. 1990, 28 (5):599–601. 研究综述-特征参数优化 浮动前向选择（SFFS） 主成分分析（PCA） 线性判别分析（LDA） [7] D. Ververidis and C. Ko tropoulos, “Automatic Speech Classification to five emotional states based o n g ender information,” in Proc. 12th European Signal Processing Conf. , pp. 341-344, Vienna, September,2004. [8] Z. Chuang, C. Wu, Emotion recognition using acoustic features and textualcontent, Multimedia and Expo, 2004. IEEE International Conference on ICME