词语关联挖掘与分析：自然语言处理中范式与句法关系研究.pdfVIP

5.基于文本的预测

3.挖掘与分析

现实世界观察的世界文本数据

自然语言

感知

处理和文本

（看法）（英语）表示

4.意见挖掘与2.联想

情绪分析挖掘与分析

大纲

•什么是单词关联？

•为什么要挖掘单词关联？

•如何挖掘单词关联？

Outline

•Whatisawordassociation?

•Whyminewordassociations?

•Howtominewordassociations?

基本关系：范式与句法

•范式：如果A和B可以相互替换（即A和B属于同一类），则它

们具有范式关系–例如，“猫”和“狗”；“周一”和“周二”

•句法关系：如果A和B可以相互组合，则它们具有句法关系（即

A和B在语义上相关）–例如，“cat”和“sit”；“开车”和“开

车”

•这两种基本且互补的关系可以概括为描述语言中任何项目的关

系

BasicWordRelations:Paradigmaticvs.Syntagmatic

•Paradigmatic:ABhaveparadigmaticrelationiftheycanbe

substitutedforeachother(i.e.,ABareinthesameclass)

–E.g.,“cat”and“dog”;“Monday”and“Tuesday”

•Syntagmatic:ABhavesyntagmaticrelationiftheycanbe

combinedwitheachother(i.e.,ABarerelatedsemantically)

–E.g.,“cat”and“sit”;“car”and“drive”

•Thesetwobasicandcomplementaryrelationscanbegeneralized

todescriberelationsofanyitemsinalanguage

为什么要挖掘单词关联？

•它们对于提高许多NLP任务的准确性非常有用‑词性标记、

解析、实体识别、首字母缩略词扩展‑语法学习

•它们对于文本检索和