基于HAWQ的电力企业数据质量管理应用研究与建设.pdfVIP

第41卷第12期自动化仪表Vol.41No.12

2020年12月PROCKSSAUTOMATIONINSTRLMENTATIONDec.2020

基于HAWQ的电力企业数据质量管理应用研究与建设

杨秋勇

(广东电网有限责任公司，广东广州510000)

摘要：随着企业信息化建设的深人，数据质量问题逐渐成为闲扰企业管理人员的S:要问题企业管理信息系统的推广实施，使得

传统系统运行过程中的数据迁移、数据转换、协同交瓦等产生大M问题数伽，导致现冇的数据质域筲理平台在功能及性能上遇到了瓶

颈为了及时、准确地支撑业务部门进行数据质tt探査、分析、治理，主要介绍了带A询的分布式系统基础架构（HAWy)数据平台在

电力企业数据处理中的应用情况，以及数据质量及实用化管理平台设计方案根据试验结果可知，对比传统系统，基于HAWQ数据质

量管理的效率打敁著的提升其中，对多表关联的数据一致性校验效率提TI•高达40倍该研究对海M数据数据质M的管理具有现

实意义和指导价值

关键词：信息化建设；数据质量；HAWQ;电力企业；数据迁移；数据转换；协同交互；管理平台

中图分类号：TH165.3文献标志码：ADOI10.16086/j.cnki.issn1000-0380.2020070032：

ResearchandConstructionofDataQualityManagementApplication

inElectricPowerEnterprisesBasedonHAWQ

YANGQiuyong

(GuangDongPowerGridCo.,Ltd.,Guangzhou510000,China)

Abstract：iththedeepeningofenterpriseinformatioconstructio,thedata(jimlityproblemhasgraduallybecomeaimportant

problemtroui)lingenterprisemanagementpersoel.Withthepromotioandimplementatioofenterprisemanagementinformation

system,alargenumberofproblematicdataaregenerateditheoperatioprocessoftraditionalsystem,suchasdatamigratio,

datatransformatioandcollaborativeinteractio,whichleadstothebottleneckoftheexistingdataqualitymanagementplatformin

termsoffunctioandpeifomiance.Iordertosupportbusinessdepartmentstoconductdataqualityexploratio,analysisand

governanceiatimelyandaccuratemaer,theapplicatioofHADOOPwithquery(HAWQ)dataplatformidataprocessingof

powerenterp)rises