面向SNS和微博客的舆情分析技术研究70726.pptVIP

面向SNS和微博客的舆情分析技术研究 付戈 fg@cert.org.cn 提纲 舆情分析技术概述 什么是网络舆情 什么是舆情分析 技术架构 核心技术 研究思路 新型舆情载体的特点 面向SNS和微博客的新型舆情分析技术 提纲 舆情分析技术概述 什么是网络舆情 什么是舆情分析 技术架构 核心技术 研究思路 新型舆情载体的特点 面向SNS和微博客的新型舆情分析技术 什么是网络舆情 提纲 舆情分析技术概述 什么是网络舆情 什么是舆情分析 技术架构 核心技术 研究思路 新型舆情载体的特点 面向SNS和微博客的新型舆情分析技术 什么是舆情分析 在民众社会态度的收集、整理、分析、报送、利用和反馈的信息运动过程中，用以客观反映舆情状态及其运动情况的资讯、消息、音信、情报、指令、数据和信号。 提纲 舆情分析技术概述 什么是网络舆情 什么是舆情分析 技术架构 核心技术 研究思路 新型舆情载体的特点 面向SNS和微博客的新型舆情分析技术 技术架构 提纲 舆情分析技术概述 什么是网络舆情 什么是舆情分析 技术架构 核心技术 研究思路 新型舆情载体的特点 面向SNS和微博客的新型舆情分析技术 核心技术 应用层支撑平台 界面展示，舆情信息报告处理流程定制，用户管理，统计分析，智能过滤等 舆情检索 对于采集到的信息提供多种（多维）检索方式 信息采集（信息雷达或网络爬虫） 信息采集模块或称网络信息雷达（速度，准确度） 元搜索引擎 （直接获取各大搜索引擎搜索结果） 信息处理（文本挖掘或自然语言处理） 信息分类，聚类（排重），主题检测等 提纲 舆情分析技术概述 什么是网络舆情 什么是舆情分析 技术架构 核心技术 研究思路 新型舆情载体的特点 面向SNS和微博客的新型舆情分析技术 研究思路 不建议针对已有技术，在某一技术上进行增量式研究 理论和技术功底薄弱 人员和技术资源配备有限 建议针对最新的舆情载体，开拓新的舆情研究领域，针对新的舆情载体的特点进行垂直领域的研究 有已有的技术可以平移使用 新需求容易出成果 对人员和及时配备要求较低 以兴趣和实际需要为驱动做研究 若“垂直领域”仍然过于宽泛，可以针对垂直领域的某一项关键技术进行研究。将精力花在一项技术上重点研究 提纲 舆情分析技术概述 什么是网络舆情 什么是舆情分析 技术架构 核心技术 研究思路 新型舆情载体的特点 面向SNS和微博客的新型舆情分析技术 舆情信息来源 SNS和微博客等新型舆情载体的特点 交互性与即时性 I 新闻、BBS： 热门话题分析：新闻出处权威度、评论数量、发言时间密集程度（概率统计分析） 倾向性分析：对于每个话题，对每个发信人发表的文章的观点、倾向性进行分析与统计（文本挖掘、自然语言处理） 主题跟踪：分析新发表文章、贴子（转贴、回帖）的话题是否与已有主题相同（文本挖掘、自然语言处理） 交互性与即时性 II SNS、微博客： 热门话题分析：话题被Follow、Forward的次数、用户或媒体权威度等（概率统计分析） 倾向性分析：简单的Follow、Forward、简短的文字评论（支持、反对）（简单的语义分析、简单的自然语言处理） 主题跟踪：通过Follow、Forward进行消息溯源、影响范围分析（文本挖掘、自然语言处理） 消息传播模式： 传播范围：指数级传播。消息通过广播模式呈现树状结构传播，并通过圈子（Social Network）跨圈子传播，呈现图状传播。 传播速度：秒级传播。在秒级或分钟级即可大规模扩散。传播速度近似于即时通讯。 交互性：交互性强。 信息量：瞬时信息量巨大。对于突发事件和敏感话题信息量可瞬间达到峰值。 权威性与影响力 新闻、BBS： 面向媒体的权威性认证。主流媒体的权威新强，非主流媒体权威性较弱； 面向用户信誉的权威性认证。在某一BBS较活跃的用户权威性较高；非活跃用户权威性较弱。 SNS、微博客： 面向用户的权威性认证。实名或半实名。社会名人、主流媒体权威性较强。 个性化与群体性 新闻、BBS： 群体性特点鲜明。面向话题进行群体划分。针对某一特定话题的集中讨论。 SNS、微博客 个性化特点鲜明。面向用户进行群体划分。信息发布有很大随意性。群体划分标准与话题没有特定联系。 丰富性与多元性 新闻、BBS： 信息源表现形式：富媒体。文本、音频、视频等。 传播形式：简单表现。以评论、回帖、转贴形式传播信息。 传播内容：文本、图片。 SNS、微博客： 信息源表现形式：简单文本、图片、视频、音频链接。 传播形式：灵活多变。Follow，Forward、推荐、编辑等。 传播内容：简单文本、图片、音频、视频链接。 隐匿性和外显性 新闻、BBS： 用户一般匿名； 对于话题的观点不明确，需要借助自然语言处理进行分析。 SNS、微博客： 用户实名制； 对于话题态度鲜明（支持、反