汉语最长名词短语的自动识别与分析-计算机应用技术专业论文.docxVIP

沈阳航空工业学院硕士学位论文摘要 沈阳航空工业学院硕士学位论文 摘要 最长名词短语作为名词短语的一个特殊类别，在句子中一般充当主语和宾语，因此自动 识别出句子中的最长名词短语，不仅有助于浅层句法分析，并且最长名词短语的识别和分析 对于自然语言处理领域中的许多应用研究，如信息检索、信息抽取、机器翻译等，都具有重 要的应用价值。 本文在分析国内外研究现状的基础上，通过对不同方法的实验对比，提出了一种统 计和规则相结合的汉语最长名词短语自动识别方法，并实现了最长名词短语的短语结构 语法分析，主要工作包括以下两方面： 1．最长名词短语的识别研究：首先对最长名词短语的识别任务进行了形式化描述， 转化为序列标注问题，采用两种通用统计模型，最大熵和条件随机场模型分别进行了实 验，对比分析后选定条件随机场作为识别系统的统计模型；在此基础上通过分析错误识 别结果建立后处理规则库对识别结果进行基于规则的后处理，识别系统开放测试结果中 F值达到了90．0％。 2．最长名词短语的分析研究：通过对短语结构语法树的层次抽象，、将其转化为层 次标注问题，提出一种基于层叠条件随机场的最长名词短语分析方法，实现了层次问的 短语规约与转移，最终得到最长名词短语的短语结构分析树，分析系统开放测试实验中 正确率为85．1％。 通过以上两方面的工作，确定了系统中的识别和分析方法，构建出最终的汉语最长 名词短语的识别和分析系统，实现对输入文本或句子的识别和分析。为了得到更好的性 能，还需要进一步的研究。 关键词：最长名词短语；最大熵模型；条件随机场；基于规则的后处理：短语结构语法 沈阳航空T业学院硕士学位论文Abstract 沈阳航空T业学院硕士学位论文 Abstract The maximal-length nolln phrase is a special sort of noun phrase which acts as the subject and the object commomy in a sentence，Thus，the automatic recognition of the maximal-length 1201211 phrase helps to the shallow parsing，and it has applied value in many natural language processing domains，such as information retrieval，information extraction，machine translation，etc． This paper firstly introduces the current status of the research at home and abroad and compares different methods，then proposes an automatic recognition method of Chinese maximal—length noun phrase based on statistics and rules．At last，the phrase structure grammar parsing of the maximal—length noun phrase is realized．Works in this thesis include： First，the recognition research of the maximal—length noun phrase．The recognition is transformed to the sequence label task formally．Two universal statistical models，namely the maximum entropy model and the conditional random field model，are adopted to make experiment respectively,and then the conditional random field is chosen as the statistical model in the recognition system after comparative analysis．Through careful error analysis，a post-processing rule base is constructed to do rule—based post-processing to above result，and the F-score