基于声谱图相似度的波形音乐检索.pptVIP

基于声谱图相似度的波形音乐检索 概要 简介 – 音乐的数字表征 简介 – 音乐内容的复杂性 简介 – 波形图 声谱图 基于内容的音乐检索的一般流程 阶段1: 从声谱图中提取特征矩阵 阶段1:示例说明 阶段2 3: 相似度定义 查询片断与数据库音乐文件的相似度通过计算查询片断特征矩阵与数据库音乐文件特征的偏差元素率获得 阶段2 3：相似度计算 具体的计算需要面对以下3个问题： 系统流程图 * 孔旭 简介：基于内容的音乐检索 1 基于声谱图相似度的检索方法 2 符号型表征 .MIDI 数字音乐 波形表征 ,wav .mp3 .wma …. 音调 音调则是一个基频和一组谐频的融合 （音色） 基音（基频）：最为强烈 泛音（谐频）：频率是基频频率的若干倍，但强度明 显减弱 成等比关系的序列（近似） 人耳敏感性对强度高低音有差别 多个声部融合在一起 转调、速度、变奏等等 音阶 多声部 阶段 3 阶段 2 阶段 1 提取特征 （旋律、节奏、音色、其他） 确定候选特征集 （聚类、哈希、树结构等索引） 相似度计算 （特征距离计算、概率性计算等） 计算矩阵相似度 寻找“锚点” 提取自声谱图的矩阵 最强k频率采样 定频采样 均匀采样 在频率域上均匀间隔地记录强度值 顺序地记录最强的k个频率是什么 在特定的若干频率上记录其强度值 偏差 元素率 矩阵 相似度 音乐 相似度 偏差元素 假设有两规模相同的矩阵A和B。用矩阵A点除以矩阵B获得商矩阵。如果处于两矩阵相同位置的元素值相等，则在商矩阵对应位置处的值应为1。定义常规区间，如[0.95, 1.05]。商矩阵中不能落入该常规区间的元素即被标注为偏差元素。 权重 1 为每行设计不同权重 2 设定窗 长度不等 3 寻找“锚点” 穷尽搜索