2019年电子政务领域的大数据解决思路.ppt

解决思路 行业实践 总结 32 问题分析 达梦大数据平台——一张图呈现 基于地理信息、移动终端等多种方式呈现 行业实践 总结 33 问题 分析 解决 思路 解决 思路 解决思路 总结 2 3 4 目录页 ContentsPage 1 问题分析 行业 实践 解决思路 行业实践 总结 34 问题分析 行业实践——公安行业 公安的 数据来 源？ 容量大 公安数 据的特 点？ 结构多样化 不断增长 价值密度低 物理分散 视频监控 卡口 PGIS 通信记录 旅店网吧 …… 对比项 警务平台生产库 (oraclerac)平均响应时间 警务平台分析库 (dmmpp)平均响应时间 人口统计 100秒 16秒 接处警统计 130秒 13秒 治安盘查统计 110秒 15秒 治安管理统计 120秒 17秒 案件查询统计 140秒 16秒 主机类型 节点数 CPU RAM DM-MPP 4 XeonE5-26202.00GHZ*4 192G OracleRAC 2 XeonE5-26802.70GHZ*4 256G 解决思路 行业实践 总结 35 问题分析 行业实践——公安行业 异构OLTP、OLAP一体化，应用层透明切换 Oracle RAC DMHS EP01 EP02 EP04 EP03 DM MPP 数据量：1.6T（不含大对象） 数据库并发连接：200-300个 解决思路 行业实践 总结 36 问题分析 行业实践——公安行业 DM MPP Xxx省公安厅 最大单表：24.1亿行 数据存储方式：MPP，哈希分布 精确查询时间： 1秒 Xxx 大数据量性能支撑 解决思路 行业实践 总结 1 问题分析 电子政务领域的大数据解决思路 行业实践 总结 2 问题 分析 解决 思路 问题分析 行业 实践 解决思路 总结 1 2 3 4 目录页 ContentsPage 行业实践 总结 3 问题 分析 解决 思路 问题分析 行业 实践 解决思路 总结 1 2 3 4 目录页 ContentsPage 解决思路 行业实践 总结 4 问题分析 信息资源共享难 缺乏统一数 据标准 信息孤岛现 象严重 面临的问题 分析利用 程度低 信息共享难 度大 数据安全缺 乏保障 缺乏统一资 源目录 解决思路 行业实践 总结 5 问题分析 电子政务建设的问题 4 项目建设 运维成本 高 电子政务 1 缺少总体 顶层规划 2 条块分割 纵强横弱 资 IT3 源利 用率低 标准不一、重复建设、粗放 式建设 1 2 各自为政、信息共享难、业务协 同更难 3 4 基础设施利用率低、数据价值没 有发挥 投资成本高、缺乏专业运维团队 、运维成本高、时间成本高（部 署、开发）。 解决思路 行业实践 总结 6 问题分析 电子政务的大数据建设目标 （1）构建政务大数据处理的交换、整合、共享、分析与服务的软件平台 （2）建立覆盖政务数据定义、存储、管理、共享、分析与服务的标准体系 （3）不断整合各类基础设施资源、数据资源，支撑大数据业务的持续发展 行业实践 总结 7 问题 分析 问题 分析 问题分析 行业 实践 解决思路 总结 1 2 3 4 目录页 ContentsPage 解决 思路 解决思路 行业实践 总结 8 问题分析 分布式数据中心架构 政府公共数据中心 … 教育 行业数据中心 卫生 行业数据中心 交通 行业数据中心 其他 交通监控系统 公交调度系统 机动车/驾驶 员管理系统 … 停车引导系统 摄像头 GPS ETC 传感器 … … 解决思路 行业实践 总结 9 问题分析 逻辑库与物理库 卫生 公安 教育 …… 远程物理库 基础库 内存 闪存 硬盘 分布式查询引擎 逻 辑 库 分 布 式 资 源 索 引 资 源 调 度 分级缓存 本地资源调度 缓冲库 本地物理库 远程资源调度 资源定位 资源检索 解决思路 行业实践 总结 10 问题分析 以数据流为主线，实现从数据采集、数据管理、数据服务到数据应用4个阶段的全过程管理 Web直报 大数据生命周期 数据库 数据文件 数据接口 质量控制 汇集 规整 标准化 清洗 转换 元数据库 结构化数据库 数据仓库 数据比对 分析服务 资源目录 信息共享 数据展现 决策支持 抽取 报送 分类 存储 数据 接口 服务 提