基于条件随机场的音乐领域命名实体识别-计算机技术专业论文.docxVIP

Classified Index: TP391.41 U.D.C: 621.3 Dissertation for the Master Degree in Engineering CONDITIONAL RANDOM FIELDS MODEL BASED MUSICAL DOMAIN NAMED ENTITY RECOGNITION Candidate： Hao Lechuan Supervisor： Prof. Wang Xuan Academic Degree Applied for： Master of Engineering Speciality： Computer Science Affiliation： ShenZhen Graduate School Date of Defence： June, 2012 Degree-Conferring-Institution： Harbin Institute of Technology 摘 摘 要 - - I - 摘 要 由于音乐数量的大量增长，人们迫切需要实现对音乐文本信息的自动化抽 取、识别和分类，信息提取首要的关键任务就是命名实体识别 （Name Entity Recognize，NER）。命名实体识别在应用自然语言处理的实践中有重要的作用， 是信息提取等各种自然语言处理方式的重要基础工具。因此音乐领域的 NER 也 是一件非常重要且有意义的研究项目。 本文是基于条件随机场（Conditional Random Fields，CRF）音乐领域的命 名实体识别，其中，本文所需要识别的命名实体类型主要有 4 种：歌手名、组 合名、音乐名、专辑名。条件随机场的一个最大的优势是，在处理输入的各种 随机的、非独立的特征时，具有很大的灵活性，且很好的解决了标记偏置问题， 所以本文采用条件随机场模型 CRF 进行在音乐领域的命名实体识别系统。 而命名实体识别的首要任务就是语料的获取，本文所建立的语料库内容主 要是采用网页挖掘的方法从搜狐音乐、新浪音乐等音乐门户网站上获取的，经 过对语料进行净化、分句、标注、划分类别、预处理等步骤完成语料的获取工 作，其中由于音乐领域还没有已经整理好的语料库，所以本文的标注工作的尤 为繁琐，在命名实体识别的数据准备过程中，还收集了各种音乐领域的词典， 用来进行特征文件的预处理中添加属性列和进行词典特征匹配。 和其他领域的命名实体识别相类似，音乐领域的命名实体识别中特征函数 的选择及特征模板的建立对识别的结果的影响很大，也是命名实体识别中的难 点。本文中分别提取了对应歌手名、组合名、专辑名、歌曲名的基本特征、前 后缀特征、字典特征和综合特征，并说明了本次系统中特征选择及特征模板的 建立过程，而且在应用不同特征的情况下进行了对比实验。 本文中还给出了音乐领域的命名实体识别系统的框架。在系统的实验中， 获得了较高的准确率的实验结果，并与基于其他模型进行对比实验，实验结果 证明了 CRF 能够较好的应用于在音乐领域的 NE 识别中，且准确率与其他模型 相比具有一定的优势。 关键词：命名实体；条件随机场；音乐；特征提取；标注 Ab Abstract - - II - Abstract With the explosive growth of the amount of music, people are very urgent to find some ways to implement the automation extraction, identification and classification of the music text information. The first key task of information extraction is named entity recognition(NER). Named entity recognition play an important role in the practice of application of natural language processing technology, and it is the important basic tool for information extraction and other natural language processing modes. So the musical domain NER is a very important and meaningful research project. The thesis is the named entity recognition based on conditiona