- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
武汉经开区智慧湖泊系统工程综合信息
平台项目数据资源管理平台设计及应用
摘要:本文围绕数据资源“汇聚、存储、管理、治理、共享、开发、可视化”
的发展主线,介绍武汉经开区智慧湖泊系统工程综合信息平台项目的数据资源管
理平台建设与应用,平台实现消除数据孤岛、规范数据标准、提高数据质量、
推动数据流通、挖掘数据价值的目
标,有效提升跨部门决策和资源协调指挥效率,为智慧水务数据底板建设提
供参考。
关键词:武汉经开区、智慧水务、数据资源管理平台
1建设背景
武汉市经济技术开发区是国家级经济技术开发区,地域面积489.9km,涉及
2
26个湖泊、15条河流、44条港渠(长度≥2km)、16个其他水体,长江穿流
而过,管理范围内河湖众多。随着经济的发展,经开区对水的治理从以洪水
防御为主,逐渐转变为防汛防排涝与水环境治理并重,治水任务日益繁多,依
靠传统人工方式难以满足需求,且水务管理涉及实体对象多,业务部门复杂,
需要大量数据支撑决策。因此经开区水务和湖泊局迫切需要补齐信息化短板,
建设即时感知、科学决策、主动服务、高效运行的智慧水务平台,实现人与自然
和
谐共生。
2021年12月武汉经开区智慧湖泊系统工程综合信息平台项目开工建设,数
据资源管理平台是支撑智慧湖泊系统稳定运行、高效运转的数据基座,提供数
据集成、数据管理、数据治理、数据开发、数据可视化、数据共享、数据安全
和调度管理等能力,有效解决数据资源不可知、数据质量不可控、数据关系不
可联、数据脉络不清晰的痛点问题,支撑开发区水务
大数据开发和利用,为挖掘数据价值提供技术支撑。
2架构设计
2.1技术架构
武汉经开区智慧湖泊系统工程综合信息平台项目数据资源管理平台包括数据
共享交换平台、数据集成平台、数据治理平台、数据目录管理平台、数据资产管
理平台、数据开发平台、数据安全平台、数据驾驶舱、可视化分析平台,实现
了数据的汇集、治理、融合、展现、
共享、开放和安全管理以及各业务系统的数据应用支撑。数据资产管理平台
采用业界成熟、
通用的的分层架构设计方案。整个系统从最底层往上,依次是:数据层、服
务层和应用层。在整个分层架构的实施过程中,依托标准的规范体系,在管理和
技术上有效地保证了平台的
稳定和安全性。整体平台的总体架构如下图所示:
图1系统架构图
2.2数据资源池设计
武汉经开区智慧湖泊系统工程综合信息平台项目数据资源池主要包括原始数据区、整合
数据区以及应用数据区。其中:
1)原始数据区-ODS汇集各类数据源形成归集库,归集库是保留原始数据,
能够反映原始业务场景的数据集合,保持数据从各数据源采集后的原始特性,
存储数据源系统增量或全量的原始细节性数据,其数据模型与数据源系统基本
保持一致。归集库的目标是把原始数
据汇聚到数据中心,为后续的基础库、主题库建设,提供数据基础。
2)归集库通过数据治理平台,将数据进行规整、建模、数据质量检测、脚
本开发、作业调度等过程形成三大基础库,五大主题库。其中基础库建设在归集
库的基础上,按照统一的数据模型对数据进行清洗、转换、整合形成基础数据
库,以业务的视角,重新组织数据,对多源、异构、数据不一致等场景的数据
进行融合汇总,建设公共基础信息资源库,形成的
高通用、易扩展和易使用的的公共数据集合。
3)主题库从实际业务场景出发,面向业务主题,打破数据表之间存在的数
据壁垒,通过梳理数据之间的关联关系,从庞大的原始数据源中抽取共性的维
度,通过公共计算下沉、明细与汇总共存等方式,从逻辑上打通各个业务数据表,
形成多种维度的主题数据集合,来
满足多维度数据分析和不断变化的业务场景需要。
3建设内容
3.1数据集成平台
数据集成平台包括数据源管理、集成来源管理、集成目的管理、集成任务管
理、监控分析等模块。接入数据来源包括内部和外部等各种数据结构和数据形式,
数据结构众多,因此采用自动化的中间件方法,如数据清洗、数据转换、数据
映射等,通过配置数据间的对应关
系、清洗规则、整合方法等,自动实现数据的采集、整理分析等,实现数据
集成。
文档评论(0)