人大金仓大数据平台解决方案.pptVIP

元数据应用 数据地图 血缘分析 影响分析 数据管控体系建设策略 Smartbi的应用功能体系分为三层：基础、扩展、增值 以前只基于数据仓库系统，现在很多客户直接在业务系统上使用 下面重点介绍一些特色功能 人大金仓大数据管理平台 解决方案 北京人大金仓信息技术股份有限公司 目录 建设背景及目标 平台规划及架构 平台建设内容 1 2 3 建设策略与方法 4 成功案列 5 大数据发展意义 工信部在《基于云计算的电子政务公共平台顶层设计指南》中明确提出，要求“各地充分发挥既有资源作用和新一代信息技术潜能，积极开展基于云计算的电子政务公共平台顶层设计，继续深化电子政务应用，全面提升电子政务服务能力和水平，进一步提高电子政务发展质量”。 数据采集 数据存储 关联分析 创造新价值 发现新知识 提升新能力 大数据： 1、容量大 2、类型多 3、存取速度快 4、应用价值高 （一）大数据成为推动经济转型发展的新动力。 （二）大数据成为重塑国家竞争优势的新机遇。 （三）大数据成为提升政府治理能力的新途径。 新一代信息技术和服务业态 大数据平台的建设目标 数据集中与整合 1 数据存储与处理 2 数据交换与共享 3 数据管控与治理 4 提升决策和风险防范水平 提高社会治理的精准性和有效性 提高服务能力与水平 促进创新服务优化管理 资源整合、信息共享、业务协同 形成国家政府数据统一开放平台 建设内容 建设目的 大数据 平台 目录 建设背景及目标 平台规划及架构 平台建设内容 1 2 3 建设策略与方法 4 成功案列 5 大数据管理平台规划 系统运维 分析决策人员 数据服务 数据采集 结构化及非结构化数据 非实时采集 系统运维 规范与流程 调度与监控 配置与变更 体制与机制 数据存储 数据管理 数据标准 元数据 数据质量 数据安全 非结构化数据 分布式存储集群 灾备与恢复 统一规划与运营 数据资产管理规划 数据中心整体架构 实施路线图规划 BIU建设 基础设施 主机 存储 通信网络 虚拟化 操作系统 数据库 信息源 流数据 实时采集 结构化数据仓库 分析数据集市 数据资源 数据共享 数据交换 数据分发 数据分析 应用功能 管理驾驶舱 门户 查询/检索 统计分析 数据挖掘 预警告警 大数据分析 安全与审计 开发人员 运维人员 大数据管理平台架构 数据 安全 数据 质量 数据 标准 云平台 业务 数据 Oracle DB2 MangoDB …… E T L 数据采集 数据交换 信息共享 数据 应用 数据计算 数据存储 结构化数据 非结构化数据HDFS 关系表 外部表 MPP 并行SQL 水平分区 垂直分区 R语言 高级分析 内置数据挖掘算法 标准应用接口JDBC、ODBC等 KingbaseDBCloud 元数 据 数据 治理 数据挖掘 多维分析 灵活 报表 决策仪 表盘 地图 分析 自助分析 KingbaseSmartBI 数据 分析 Smartbi Mobile Smartbi dataIn 数据 分析 目录 背景及目标 平台规划及架构 平台建设内容 1 2 3 建设策略与方法 4 成功案列 5 大数据平台建设内容 ETL架构与工具 数据库软件平台 金仓ETL流程结构图 金仓ETL — 全面的数据访问与平台支撑 支持符合ODBC/JDBC 接口规范的46种数据库系统 Oracle KingbaseES MySQL DB2 SQL Server Informix Sybase 支持主流的国内外操作系统 Windows 系列/Linux系列 Hadoop 大数据平台建设内容 数据库软件平台 数据架构设计 数据模型设计 KingbaseDBCloud — 系统架构 KingbaseDBCloud是顺应大数据和云计算时代PB级海量数据处理而推出的高性 能、高可用、高扩展和支持全局事务的并 行分布式云数据库系统。 支持 OLTP 和 OLAP两种典型应用场景，使党政军及企业 级应用在处理业务的同时具有大数据分析 能力,可以有效构建100TB-PB级海量云数据中心。 采用Share-Nothing架构，包括负载均衡节点、协调节点、存储执行节点 和全局事务管理节点四大组件，每个组件均可以根据实际情况按需添加。 在KingbaseDBCloud架构基础上，增加对HDFS文件存储的支持，实现SQL和NoSQL统一访问接口，同时支持SQL和NoSQL查询处理 KingbaseDBCloud-系统功能 数据处理 数据存储 结构化数据 非结构化数据HDFS 关系表 外部表 MPP 并行SQL 水平分区 垂直分区 R语言 高级分析 内置数据挖掘算法 数据共享（标准应用接口JDBC、ODBC等） KingbaseDBCloud 大数据平台建设内容 统一应用平台