中文词语倾向性的分析8.pdfVIP

中文词语倾向性的分析 王根 赵军 （中国科学院自动化研究所模式识别国家重点实验室) 摘要：倾向性语言又是观点表达的重要形式，识别出文本中的倾向性语言是挖掘文本中观点信息的关键工 作之一。本文分析了褒贬义词语在句子中所起的主观作用，旨在以此判定文本句子中是否为带有倾向性的。 本文认为褒贬义词语在句中所起的作用应该由词语在句中位置和自身意义共同影响。为了证明这两点我们 首先对语料库进行了统计和分析，然后分别针对这两个因素分析了词语在句子中表现的倾向性：一方面在 同时考虑倾向性强弱和极性的测度下，提出用极坐标来表示一个词语的倾向性，并使用一种均衡化互信息 的方法，探讨了词语在统计意义下，独立于具体上下文体现出的自身倾向性；另一方面以包含上下文的2000 形容词标注语料为例，使用 ME 和 SVM 方法测试了 30 个上下文特征的对词语倾向性的作用。最后给出了 评测的方法和结果。 关键词：词语倾向性；主观性语言；上下文；先验倾向性； Abstract: Subjective language contains lots of information about personal opinion and tho