大数据平台建设专项方案.docVIP

大数据平台建设方案 （项目需求和技术方案） 一、项目背景 “十三五”期间，伴随中国现代信息技术蓬勃发展，信息化建设模式发生根本性转变,一场以云计算、大数据、物联网、移动应用等技术为关键“新 IT”浪潮风起云涌，信息化应用进入一个“新常态”。***（某政府部门）为主动应对“互联网+”和大数据时代机遇和挑战，适应全省经济社会发展和改革要求，大数据平台应运而生。 大数据平台整合省社会经济发展资源，打造集数据采集、数据处理、监测管理、估计预警、应急指挥、可视化平台于一体大数据平台，以信息化提升数据化管理和服务能力，立即正确掌握社会经济发展情况，做到“用数听说话、用数据管理、用数据决议、用数据创新”，牢牢把握社会经济发展主动权和话语权。 二、建设目标 大数据平台是顺应现在信息化技术水平发展、服务政府职能改革架构平台。它关键目标是强化经济运行监测分析，实现企业信用社会化监督，建立规范化共建共享投资项目管理体系，推进政务数据共享和业务协同，为决议提供立即、正确、可靠信息依据，提升政务工作前瞻性和针对性，加大宏观调控力度，促进经济连续健康发展。 制订统一信息资源管理规范，拓宽数据获取渠道，整合业务信息系统数据、企业单位数据和互联网抓取数据，构建汇聚式一体化数据库，为平台打下坚实稳固数据基础。 梳理各相关系统数据资源关联性，编制数据资源目录，建立信息资源交换管理标准体系，在业务可行性基础上，实现数据信息共享，推进信息公开，建立跨部门跨领域经济形势分析制度。 在大数据分析监测基础上，为政府把握经济发展趋势、预见经济发展潜在问题、辅助经济决议提供基础支撑。 三、建设标准 大数据平台以信息资源整合为关键，以大数据应用为关键，坚持“统筹计划、分步实施，整合资源、协同共享，突出关键、重视实效，深化应用、创新驱动”标准，全方面提升信息化建设水平，促进全省经济连续健康发展。 1、统筹计划、分步实施。结合本省经济发展和改革领域实际需求，明确总体目标和阶段性任务，科学计划建设项目。先期完成大数据平台整体架构建设，后期分步完成业务系统整合及相互间数据共享问题。 2、整合资源、协同共享。对信息资源统一梳理，建立经济发展和改革信息标准资源库和数据规范，逐步消亡“信息孤岛”，加紧推进数据资源整合，建设共享共用大数据中心，实现业务协同。 3、突出关键、重视实效。以用户为中心，以需求为导向，以服务为目标，突出关键，重视实效，加强平台可用性和易用性。 4、深化应用、创新驱动。深入了解用户需求，亲密跟踪信息技术发展趋势，不停深化应用、拓展新技术在应用中广度和深度，促进跨界融合，丰富管理和服务手段。 四、建设方案 为了确保项目标顺利进行和建设目标可行性，我们采取以下多个建设方案。 1、数据采集方案。 我们统一信息资源标准规范，建立多维度数据库，拓宽数据起源，经过不一样方法汇聚数据，增强分析力度，提升监测预警正确性和时效性。 预留接口，支持其它系统多种数据上传导入处理。将现存相关经济运行业务系统中历史数据和时效数据，经过上传数据文件至服务器、分析提取有效数据导入服务器数据库等方法采集起来，在本平台上复用。 支持外接数据上传导入处理。能够将企业单位或定点监测机构数据经过一样方法采集起来，在本平台上复用。 支持非结构化数据，即搜索引擎数据、社交媒体数据、地理空间数据和音视频数据等等。 2、数据分析方案。 大数据之大并不是难点所在，其真正难以对付挑战来自于数据类型多样、要求立即响应和数据不确定性，而我们所面临也正是如此。 我们采取批量数据处理系统，借助于深度学习、知识计算和可视化等大数据分析技术，经过对数据批量处理挖掘其中价值来支持决议和发觉新洞察。 3、业务整合方案。 在对社会发展相关业务子系统充足调研基础上，结合项目需求，可对其进行整合或嵌入处理（本方案整合公共信用信息服务平台、投资项目信息管理平台等）。 整合处理。将原有数据经过上传或导入方法进行采集，原有功效模块整合到本平台中，合二为一，完美将数据汇聚起来。缺点是耗时较长。 嵌入处理。以单点登录方法将原有系统链接嵌入到本平台中，作为子系统单独存在。缺点在于数据共享难以实现。 五、建设内容 1、宏观经济监测估计及可视化平台 政府信息化最终目标是提升政府决议水平，其中经济决议是关键内容。为了提升宏观调控决议水平，我们必需从依靠传统统计数据向依靠互联网非统计数据转变，从监测估计宏观经济总量向监测估计宏观经济先行指标转变，从中长久监测估计向实时监测估计转变。 宏观经济监测估计及可视化平台围绕网络搜索、社交媒体、电子商务、终端定位和业务交易等五个方面全方面整合互联网相关数据资源，建设以“容量大、形式多、分类细、响应快”为目标宏观经济监测估计数据库，构建基于互联网数据宏观