斯坦福大学自然语言处理第七课“情感分析(Sentiment Analysis)” - 我爱公开课.pdfVIP

一、课程介绍 斯坦福大学于2012年3月在Coursera启动 了在线 自然语言处理课程 ，由NLP领域大牛Dan Jurafsky 和 Chirs Manning教授授课 ： /nlp/ 以下是本课程的学习笔记 ，以课程PPT/PDF为主 ，其他参考资料为辅 ，融入个人拓展、注解 ，抛 砖 引玉 ，欢迎大家在“我爱公开课”上一起探讨学习。 课件汇总下载地址 ：斯坦福大学 自然语言处理公开课课件汇总 二、情感分析 （Sentiment Analysis） 1）What is Sentiment Analysis? 情感分析 （Sentiment analysis） ，又称倾 向性分析 ，意见抽取 （Opinion extraction） ，意见挖掘 （Opinion mining） ，情感挖掘 （Sentiment mining） ，主观分析 （Subjectivity analysis） ，它是 对带有情感色彩的主观性文本进行分析、处理、归纳和推理的过程 ，如从评论文本 中分析用户 对“数码相机”的“变焦、价格、大小、重量、闪光、易用性”等属性的情感倾 向。 更多例子如下 ： l  从 电影评论 中识别用户对 电影的褒贬评价 ： l  Google Product Search识别用户对产品各种属性的评价 ，并从评论 中选择代表性评论展示 给用户 ： l  Bing Shopping识别用户对产品各种属性的评价 ： l  Twitter sentiment versus Gallup Poll of Consumer Confidence：挖掘Twitter （中 文 ：微博）中的用户情感发现 ，其与传统的调查、投票等方法结果有高度的一致性 （以消费 者信心和政治选举为例 ，corelation达80%） ，详细见论文 ：Brendan O'Connor, Ramnath Balasubramanyan, Bryan R. Routledge, and Noah A. Smith. 2010. From Tweets to Polls: Linking Text Sentiment to Public Opinion Time Series. In ICWSM­2010。 （注 ：下图中 2008年到2009年初 ，网民情绪低谷是金融危机导致 ，从2009年5月份开始慢慢恢复） l  Twitter sentiment: 通过Twitter用户情感预测股票走势 ，2012年5月 ，世界首家基于社交媒 体的对冲基金 Derwent Capital Markets 在屡次跳票后终于上线。它会即时关注Twitter 中的 公众情绪指导投资。正如基金创始人保罗•郝汀 （Paul Hawtin）表示 ：“长期以来 ，投资者 已 经广泛地认可金融市场由恐惧和贪婪驱使 ，但我们从未拥有一种技术或数据来量化人们的情 感。”一直为金融市场非理性举动所困惑的投资者 ，终于有 了一扇可以了解心灵世界的窗户 ——那便是 Twitter 每天浩如烟海的推文 ，在一份八月份的报道 中显示 ，利用 Twitter 的对冲 基金 Derwent Capital Markets 在首月的交易中已经盈利 ，它以1.85%的收益率 ，让平均数只 有0.76%的其他对冲基金相形见绌。类似的工作还有预测 电影票房、选举结果等 ，均是将公众 情绪与社会事件对 比，发现一致性 ，并用于预测 ，如将“冷静CLAM”情绪指数后移3天后和道 琼斯工业平均指数DIJA惊人一致。详细见论文 ： Johan Bollen, Huina Mao, Xiaojun Zeng. 2011. Twitter mood predicts the stock market, Journal of Computational Science 2:1, 1­8. （注 ：DIJA，全称Dow Jones Industrial Average） l  Target Sentiment on Twitter （Twitter Sentiment App）：对Twitter中包含给定query的 tweets进行情感分类。对于公司了解用户对公司、产品的喜好 ，用于指导改善产品和服务 ， 公司还可以据此发现竞争对手的优劣势 ，用户也可以根据网友甚至亲友评价决定是否购买特 定产品。详细见论文 ：Alec Go, Richa Bhayani, Lei Hua