面向hownet 的词汇语义倾向计算.pdfVIP

基于HowNet的词汇语义倾向计算’ 朱嫣岚，阂锦，周雅倩，黄首普，吴立德 复旦大学计算机科学与工程系 上海 200433 Email:(zhuyl,jmin,zhouyaqian,xjhuang,ldwu}@ 摘 要:语义褒贬性倾向研究对文本分类、自动文摘、文本过滤等自然语言处理的研究具有实用价值.篇章 语义倾向研究的关键工作是对词汇的褒贬倾向判别.本文基于HowNet.提出了两种词汇语义倾向性计算的方 法:基于语义相似度的方法和垂于语义相关场的方法.实验表明，本文的方法在汉语常用词中的判别准确率 较高，具有一定的实用价值. 关键词:语义倾向:知网;相似度计算;自然语言处理 SemanticOrientationComputingBasedonHowNet ZhuYanlan，MinJin,ZhouYa-gian,HuangXuanjing,WuLide DepartmentofComputerScienceandTechnology,FudanUniversiyt,Shanghai200433,China Email:{zhuyl,jmin,zhouyaqian,xjhuang,ldwu}@ Abstract:Semanticorientationinferenceisameaningfulworkthatcouldprovideusefulinformationfortext classification,summarization,filtering,etc.Measuringtheaveragesemanticorientationofwordsinapassage wouldhelptopredicttheauthorsattitudetowardsatopic.ThisarticleintroducesasimplemethodbasedonHowNet forcomputingsemanticorientationofChinesewords.Thismethodrequiresonlyafewsamplewordsforinitiation, however,itachievesasatis勿ingresultinthetestsetandperformsevenbetteramongfrequently-usedwords. Keywords:semanticorientation,HowNet,similariytcalculating,naturallanguageprocessing 1简介 面对浩瀚的网络资源，如何通过有效的手段获取所需的信息，是目前计算机领域研究的热 点。 语义倾向性研究正是在这一背景下应运而生的。人们根据各自所关甲注的问题在Web上进 行搜索，通过阅读大量相关文献、介绍、评论，逐渐形成自己的观点。由于网络资源过于庞大， 搜集一阅读一评价的工作变得十分繁琐和耗时。因此迫切地需要一套能够自动搜索、评价、 .基金资助:国家自然科学墓金:上海市科技攻关计划(035115028) - 140- 归纳的系统替人们完成这一任务。困难是显而易见的，计算机虽然具有极快的处理速度，但如 何使其能够自动完成对文本的语义倾向的推断，仍然是个需要研究的课题。 所谓词汇的语义倾向，即对于词汇的褒贬程度计算出一个度量值。为了便于统计和比较， 目前比较常用的做法是将度量值规定为位于正负1之间的实数.当度量值高于某闽值时，判别 为褒义倾向;反之，则判为贬义倾向。此外，我们可以通过对篇章中词汇的语义倾向值求平均 的方式，获得篇章的语义倾向.因此，对词汇的语义倾向计算是该研究中的关键工作。 语义倾向研究具有极大的实用价值。在商业领域中，能够为企业进行市场分析、市场调查、 顾客反馈提供更多有价值的信息;在管理领域，能够帮助领导者更快地了解群众对各类政策措 施的反馈意见，计算机代替人来完成评估工作，可以节省大量的人力和物力。 除此之外，语义倾向判别也为文本过滤、自动文摘的研究工作提供了新的思路和新的手段。 我们可以对语义倾向度量值设定一个合适的闽值，对于倾向值低于闻值的文章进行过滤操作， 或者可将倾向值赋予一定的权值，作为文本过滤中需要考虑的一个因素。而自动文摘的生成， 可将具有强烈褒贬倾向的语句作为关键句摘出，从而更好地保留作者的观点和意