基于树库和机器学习的汉语依存句法分析_NoRestriction.pdfVIP

基于树库和机器学习的汉语依存句法分析 刘海涛 中国传媒大学应用语言学研究所，北京 100024 摘 要：基于树库和机器学习的语言处理方法是自然语言处理领域中的一个研究热点。本文旨在探索利用 语言学手段来提高句法分析精度的可能性。本文采用MaltParser和自建的汉语依存树库进行了相关的汉语 依存句法分析实验。通过对句法分析结果的分析，找出了影响句法分析精度的主要因素，并据此对树库中 处理某些语言结构的方式进行了修改，然后再对得到的句法分析数据进行进一步的分析，以确定所用方法 的有效性。结果表明，无标记依存句法分析精度提高了5．5个百分点，有标记依存句法分析精度提高了7．5 个百分点。 关键词：依存句法分析，树库，中文信息处理，标注体系，语料库语言学 Chinese BasedonTreebank DependencyParsing LiuHaitao Instituteof of AppliedLinguistics，CommunicationUniversityChina， Beijing，100024，China basedtreebankisacentralissuecurrentnatural articleaims Abstract：Parsing of languageprocessing．Theat the the means．Theauthor an exploringpossibilityofincreasingparsingaccuracyusinglinguistic reports Chinese MahParseranda thedetail experimentof dependencyparsingusing self-builttreebank．Throughanalysis the authorthe the the result,the for parsing givespossiblesugges捃foTimprovingperformanceof parser,which areusedasthe to theannotation the treebank,theunlabeled guidancemodify scheme．Afterchanging accuracyof attachmentscoreincreases5．5 SCOreraises labeled 7．5 dependency percents,theaccuracy percents．The showsthat can the annotationscheme the experiment linguistsadjustlinguisticframeworkof forimproving basedontmebanL precisionoftheparser Keywords：dependencyparsing,treeban疋Chinesecomputing,annotationscheme；corpuslinguistics 1 引言 基于语料库和机器学习的自然语言处理方法是当前自然语言处理领域中