基于谐波相关性的音乐主旋律提取算法.docVIP

  基于谐波相关性的音乐主旋律提取算法 宋岳阳，李巍海，吕玉琴** （北京邮电大学电子工程学院，北京 100876） 5 10 摘要：随着互联网和计算机技术的发展，音频内容的数量呈爆炸性增长，用户对所需内容的 快速搜索愈发困难。基于内容的音乐检索为用户提供了一种全新的音频内容检索方式，音乐 主旋律提取则是音乐检索中的一项关键技术。本文首先总结了近年来音乐主旋律提取中的主 要算法，随后提出了一种基于声音谐波能量互相关的频率跟踪算法，可以对多声源混合的单 声道音频文件中的基音频率进行跟踪，并设计了一套以该算法为核心的音乐主旋律提取方 法。最后，使用音乐片段进行了测评。结果显示，本文算法可以成功的进行音乐主旋律提取， 综合性能较高。 关键词：计算机应用技术；哼唱检索；主旋律提取；谐波能量相关性 中图分类号：TP391 15 An Audio Melody Extraction Algorithm Based on Correlation of Harmonic Song Yueyang, Li Weihai, Lv Yuqin (School of Electronic Engineering, Beijing University of Posts and Telecommunications, Beijing 20 25 30 35 40 100876) Abstract: With the repid development of Internet and computer, the quantity of audio content has a explosive growth. It is more difficult for users to locate multimedia resources. Content-based music retrieval provides users a brand new way to search audio content, and music melody extraction is a key technology to it. In this paper, we summarize major algorithms in melody extraction for recent years. And then we propose a correlation based foundamental frequency tracking algorithm by analyse the energy of harmonic. It can extract frequency contours in a multi-source mono audio file. Finally, music clips are invovled to evaluate. The results show that the algorithm can successfully extract the main melody of the music, overall performance is acceptable. Key words: Computer Technology; Query by Humming; Melody Extraction; Correlation of Harmonic 0 引言 随着多媒体和网络技术的迅猛发展以及 Internet 的广泛普及，图像、音频和视频等多媒 体数据成为了互联网上人们互相传送数据的主要部分。目前几乎所有网站使用的音乐检索方 法都是基于文本的检索和索引，但网络中海量的音乐数据使得通过人工进行标注变得不切实 际。同时，用户在进行检索时往往不知道音频数据的名称、作曲家等信息，或需要根据音乐 的曲调进行检索，这是传统的检索方式无法完成的。 哼唱检索是基于内容的音乐检索中非常重要的一个分类。目前主流的单声道音频主旋律 提取算法从提取步骤上分可以分为三步： 步骤一：将时域音频信号映射到变换域，多使用傅里叶变换、小波变换等。一些算法使 用改进的傅里叶变换以实现动态时频域分辨率[1][2]，但是仍然不能处理信号的瞬时变化。近 年来，基于经验模态分解的变换方式受到了越来越多的研究[3]，但是目前还很少应用在音乐 作者简介：宋岳阳(1986-)，男，硕士研究生，主要研究方向：智能信息终端与多媒体通信 通信联系人：吕玉琴(1945-)，女，教授，主要研究方向：智能信息终端与多媒体通信. E-mail: lvyq@263.net -1- 旋律提取中。  45 50 55 步骤二：提取音乐中各声源的基音频率，称为多基频估计。分为两类算法，一