基于词典与语料库的概念内聚度研究.pdfVIP

第一届全国信息检索与内容安全学术会议 基于词典和语料库的概念内聚度研究 刘德荣，王永成 (上海变通大学计算机科学与工程系一t海200030) 擅要： 针对自然语占处理中利用概念空间进行自动文档处理，本文提出一种基于组合词典和语料统计 来计算概念内聚度的方法：该方法融合知识库和统计处理在概念关系判断方面的各自优势，有效计算概念语 义关联，提高自动文档分析的准确性。通过实验验证本方法的有效性。 关t诩： 概念内聚度： 词典； 语料统计； 融合 of Cohesionon udyConcept Based Lexiconand Corpus Liu Derong，WangYongeheng Science (D印anmcntofComputer University,Shanghai200030) Jiaotong and脚Detrin8，Shashai cohesionsbasedonlexiconand amethodofcalculatingconcept corpusItisimportantfor Abstract：Thispaperpresents dncuraems innatural an of automatic space integration byconcept languageprocessing．Theapproachprovides processing the basedOll lexiconandthosebasedoilstatistic，The the oflinguistic concept algorithmgivenby paper advantages analysis to the and of Call thesemanticrelevancebetween automatictext concepts rationality efficientlyexpress improveprecision resultsshowthatthe is anduseful． efficiency analysis algorithm Experimental cohesion；lexicon；corpusstatistics；integration words：Concept key I引言 语义关联分析是自然语言处理领域的一个非常重要的课题。我们分析蕊个句子或文章的两段文 宇的语义关系，可以从组成它们的有序词语序列之间的语义关联推绎出整体间的语义关联。分析两 基金资助；本研究受国家“863”计划项目支持(编号2002AAll9050) 作者简介；刘德荣(1972-)．男(汉)，四川人，博士生，Email：drliuOsjtu．edu．cn