舆情监控系统与新闻选稿系统技术方案建议书详解.docx

舆情监控系统与新闻选稿系统二期技术方案建议书2016年8月陈伯达目录舆情监控系统与新闻选稿系统二期技术方案建议书1目录1一、概述21.1 项目名称21.2 项目背景31.3 目标和要求3二、 总体设计42.1 系统定位42.2 业务架构42.3 技术构架52.4 业务流程6三、功能设计73.1. 舆情采集73.1.1. 采集配置73.1.2. 采集渠道73.2.3. 云数据采集子系统83.2. 舆情处理93.2.1 Saas服务93.2.2. 去重处理93.2.3. CMS接口数据格式特殊处理93.2.4. 站内搜索93.3. 舆情分析103.3.1. 离线计算103.3.2. 热点计算优化103.3.3. 意见领袖挖掘113.3.4. 话题事件分析113.4. 数据监控123.4.1. 进程监控123.4.2. 数据监控123.5. 舆情可视化133.5.1. 实时热点新闻133.5.2. 热点人物展示133.5.3. 热点推送展示143.5.4. 热点新闻展示143.6. 编辑辅助143.8.1 关键词趋势分析143.8.2 段子手最新快讯144.非功能性设计154.1. 系统性能154.2. 可靠性154.3. 安全性155. 项目实施计划156.项目质量控制167.年华公司简介168.售后服务179. 公司资质及大型软件实施能力179.1. 公司技术资质179.2. 大型软件实施能力189.2.1. 贵州移动14计费网乐享100平台189.2.2. 西藏移动乐享100平台2110. 相关案例24一、概述1.1 项目名称舆情监控系统与新闻选稿系统二期1.2 项目背景移动设备迅猛发展，信息碎片化盛行，导致信息裂变式、指数级传播,每个单位、机构、个人等都时刻面临着舆情危机或社交危机。 社会化媒体的爆发式发展，为每个人提供主动话语权，当政府服务、企业产品没有达到民众预期，他们会怎样？投诉、抱怨、诋毁…？政府企业如何应对？随着互联网逐渐成为新闻发布、信息披露的重要平台和人们交流思想、分享信息的主要渠道，网络舆情越来越受到政府和企业的重视；市场上也涌现出众多舆情软件企业提供舆情分析服务，通过爬取网络媒体、微博社区、博客网站等互联网渠道的信息，及时发现舆论热点，识别负面信息，支撑政府企业对敏感内容开展进一步的监管、控制和引导。然而，发展至今，这种传统的舆情分析已然不能完全满足市场的需要：一方面，微信、APP上信息规模日益扩大，政府企业对于移动互联网的分析需求愈发强烈，另一方面，面对丰富的互联网信息，政府企业也不再仅仅满足于热点和负面舆情的发现，新的分析需求被逐渐提出。1.3 目标和要求舆情监测(发现得了)舆情解读(分析得清)舆情公关(处理得好)（1）网络舆情采集性能支持站点数量不限站点数量采集最大线程数支持200以上,视采集机器性能而定站点数量200个更新频率5分钟（用户可以根据自己的需求进行调整）（2）网络舆情分析性能舆情分析性能10条/秒（视服务器性能会有调整）（3）服务平台应用性能并发用户数300人（视服务器性能会有调整）支持采集最大数据量5000万舆情搜索效率响应时间2秒（100万数据）总体设计2.1 系统定位本系统主要利用垂直搜索和信息挖掘技术，对互联网海量信息自动抓取、自动分类聚类、主题检测、专题聚焦，针对用户的网络舆情监测和新闻专题追踪等信息需求，通过运营人员支撑服务，自动形成简报、报告、图表等分析结果，为客户决策层全面掌握舆情动态，做出正确舆论引导，提供分析依据。 以政府、企事业单位或团体个人等用户关注的重点关键词、专题、舆情信息为核实，在互联网、移动互联网、行业细分领域等多渠道进行“地毯式”搜集，从杂乱无章的信息中，自动摘要有价值的信息资产并线索化、服务化，进一步聚集舆情热点、扑捉传播路径、跟踪发展趋势、清理信息脉络、分析用户反馈、挖掘潜在需求、监控舆论影响等，从而帮助政府、企业、团体个人及时规避风险、侦查竞争、认清自我、了解用户，辅助决策、强化管理、支撑运营的多方面需要。2.2 业务架构2.3 技术构架2.4 业务流程　１.网络信息采集系统从互联网上采集新闻、论坛、博客、存储到舆情数据库中，并通过舆情搜索引擎对海量的舆情数据进行实时索引．　　２.舆情分析引擎负责对舆情数据库进行清洗、智能分析和加工．舆情分析引擎依赖于智能分析技术和舆情知识库．　　３.舆情服务平台把舆情数据库中经过加工处理的舆情数据发布到Web界面上并展示给用户．用户通过舆情服务平台浏览舆情信息，通过简报生成等功能完成对舆情的深度加工和日常监管工作．三、功能设计舆情采集采集配置舆情词配置优化：本部门不能新增相同的舆情词，跨部门允许有相同的舆情词。普通账号只能查看和维护本部门及自己添加的舆情词，而管理员则可以查询和维护全