大数据治理暨数据共享交换平台建设方案.pptVIP

大数据治理暨数据共享交换平台建设方案

整理制作：郎丰利1519制作时间：2023年睿利而行

整理制作：郎丰利1519制作时间：2023年睿利而行

整理制作：郎丰利1519制作时间：2023年睿利而行

发现规律：通过多源多维海量数据发现规律

现状研判：通过数据统计和比对对现状进行描述

科学预测：基于规律和现状，预测预警发展趋势

综合服务：为社会各个方面提供知识成果与服务

“资源是资产”“数据是资产”

•资产由企业及组织拥有和控制，能够提供增值服务、带来经济利益的重要资源。资产不但需要管理，更需要运营。

•逻辑形式存在

•间接或直接产生经济效益

•不断增值、再利用

•物理形式存在

•直接产生经济效益

•会折旧、会退网

数据是资产

非结构化数据

结构化数据

交通应急数据GIS地图数据

驾驶员基础数据

物流状态数据

视频监控数据

城市管理数据

个人出行数据

基础设施数据

交通路况数据

车辆基础数据

物理资产

数据资产

……数据

4

信息系统建设方案的演变

应用

+

平台

应用系统

一数

一源

规范

服务

当前数据管理的问题

•传统的烟囱式建设模式，造成系统林立，数据分散并且封闭

•为了支撑应用，相同的数据在不同系统之间重复存放，造成资源的浪费

数据开放共享的价值

•数据开放共享，打破厂商垄断数据的局面，形成开放的生态格局

•避免数据的重复存放，减少资源浪费统一

5

数据资产运营中的问题

数据开放共享平台

•数据整体质量不高，监管机制不健全。缺乏面向数据质量的评估机制和数据质量的服务体系

•建立统一完善的数据质量体系，从数据质量管理系统和数据服务体系两方面保障数据的全程质量

•数据共享困难，系统间接口繁多，实现复杂度高，且可靠性难以保证

•形成应用和数据分离的体系架构，底层共享的数据统一支撑上层各种应用

分散

重复

接口复杂

统一治理

质量较差

集中共享

数据资产管理与企业IT信息化过程紧密相连，但对数据资产管理不仅仅是建设一套IT系统，更需要相应管理手段的跟进。

对数据资产的管理需涵盖规范、采集、加工、使用、优化、服务等数据资产的全生命周期，这样管理的数据资产才能够好用、实用，真正体现数据作为资产的价值。

清洗加工

数据质量管理

数据

采集

数据资产运营

标准

规范

应用

6

数据资产全生命周期管理

数据采集

•数据采集

•数据录入

•数据解析

•数据汇总

•数据存储

•数据标准化

•资源建模

•数据架构

•场景定义

•指标数据管理

•数据交换

•数据共享

•数据库模式

•API接口模式

•发布订阅模式

•数据抽取

•数据转换

•数据校验

•数据关联

•数据脱敏

•指挥调度

•统计分析

•实时监测

•流量预测

•数据服务

……•……•……•……•……

•准确性•完整性•及时性•安全性•……

开放共享

清洗加工

标准规范

创新应用

开放共享

创新

•

数据来源广

数据种类多

数据库文件消息数据互联网业务填报离线导入服务

互联网适配

数据库适配

数据消息路由

数据质量核检

数据清洗转换

数据预处理

数据格式处理

整体业务过程

安全可靠传输

汇聚总线

资源池

数据源

存储架构

扩展接口扩展接口

模板服务、快速配置

灵活适配、安全可靠

大数据资源汇聚总线

数据汇聚过程

数据加密

数据标准化

数据脱敏

数据加工

微内核

SCA

安全管控

汇聚编排

汇聚监控

OSGI

SOA

集群管控

数据来源

汇聚总线

安全可靠传输

数据汇聚

11

数据共享

数据共享管理

数据共享门户

共享工作台

内外数据互通

数据资源目录

数据治理

16数据共享交换平台-功能框架

目录体系管理目录注册目录发布目录维护目录查询目录资源