《基于时空相关度融合的语音唇动一致性检测算法-论文》.pdfVIP

第 4期 电 子 学 报 V01．42 No．4 2014年 4月 A AEE【CrR0NICA s1NICA Apr． 2014 基于时空相关度融合的语音唇动一致性检测算法 朱铮宇，贺前华，奉小慧，叶婉玲，李艳雄，杨继臣 (华南理工大学电子与信息学院，广东广州 510641) 摘 要： 本文在传统发音唇动分析模型的基础上，构建一个发音唇动时空模型．提出了唇动时域特征、空域特性 与语音的相关度度量方法，以及融合时空度量的语音唇动一致性检测方法 ．利用唇宽、唇高与音频幅度变化之间的联 系获得语音唇动的时域一致性评分；通过协惯量分析法获得语音与唇部空域特征的初始相关度，并提出了针对语音、 唇动 自然延时的相关度修订疗法 ；最后将时空上的得分进行融合以判断语音唇动是否一致．初步实验结果表明，对于 四种不一致音视频数据 ，与常用的协惯量方法相比，EER(EqualE