一种PMS异常数据检测工具设计.docVIP

一种PMS异常数据检测工具设计 　　【摘 要】 随着国网公司PMS系统建设的完成和深化应用的推进，数据质量已成为系统高效应用的重要因素，如何高效、全面的识别不完整数据及异常数据，是实现PMS系统数据的规范性、标准化的基础。通过PMS数据质量检测工具研制，依靠自动化数据质量分析工具提高数据质量管理水平，改善了数据质量，全面提升了PMS系统数据质量的自动化、信息化水平。 　　【关键词】 PMS系统 数据质量 数据检测 　　电公司生产管理系统（PMS）于2013年正式上线运行，生产管理系统（PMS）是国家电网公司“SG186工程”八大业务应用之一，以提高输电、变电、配电设备可靠运行为目标，实现电网生产的规范性、标准化和精细化管理，提高电网安全生产管理水平[1]。PMS系统中维护的设备类型包括输电设备16种类型；变电设备32种类型；配电设备36种类型，数据类型繁多、数据量大。PMS系统数据质量分析工具较缺乏、运维工作量大、自动化水平低[2]。目前系统据质量标准体系不完整，缺乏有效的数据治理机制，在数据生命周期之中容易流入一些不一致、不准确、不可靠的数据，数据质量存在隐患。同时数据运维人员每日面对多种设备类型数据，按照现行的人工核对方式难以从容应对，即使加班加点维护、管理也不能满足现在数据随时间变化更新的步伐；缺乏有效的数据质量标准、分析和监控等自动化运维工具，在数据变化时，运维人员手工比对，难以做到数据变化，及时对数据迭代清洗更新[3]。 　　为此本文通过对各类设备台账的校验规则进行分析，归纳出一种基于正则表达式的台账校验规则表达方法，并以此方法为基础研制了PMS数据质量检测工具，以支撑PMS系统数据质量提升工作的标准化实践。 　　1 基于正则表达式的数据检测工具研制 　　工具统一管理设备类型和数据标准定义，并以运行过程数据质量分析和数据监控为主线，以数据质量体系为支撑，实现数据质量持续提升管理。 　　1.1 设备类型管理 　　通过界面方式对PMS系统所属设备进行分类型管理。包括输电设备、变电设备、配电设备等三大类设备。 　　1.2 设备类型数据标准定义 　　实现不同设备类型属性数据的数据标准定义，通过此功能可以满足数据标准定义随实际需要方便变更。通过对台账字段的正确规则进行分析，将数据标准定义类型分为：选择类型、手工类型、计算类型、拼接类型、关联类型等。选择类型针对该属性内容是某个内容集合的子集，例如：电压等级包含交流1000kV、交流500kV、交流220kV；手工类型针对属性内容为指定正则表达式内容；计算类型针对属性内容直接表达式计算，例如：额定电流=额定容量KVA/（电压等级*1.732）；拼接类型针对属性内容中包含其他属性内容关系，例如：设备型号中应含有字符或者数字加上容量及电压等级信息；关系类型针对属性内容包含负责的关系运算，例如：相数是单相，相别可以是A相、B相、C相；相数是三相，相别可以是ABC相等。如图1所示。 　　1.3 数据质量分析管理 　　依据定义好的数据标准，对设备类型数据进行数据质量分析，给出数据分析中异常数据的结果。同时能导出EXCEL文档异常数据，在文档数据中标示出了异常数据并对异常数据给出了整改说明。分析的结果会存储系统日志，为以后数据监控和考核提供依据。如图2所示。 　　1.4 数据质量监控管理 　　数据质量监控管理提供同一设备类型在数据标准定义下，不同时间整改后的异常数据数量统计，为数据质量提升提供考核依据。监控管理人员通过图形化界面监控过程中数据质量提升管理工作，更好的为数据质量提升做好决策支持。 　　2 结语 　　通过PMS数据质量检查工具的研制，黄山供电公司进一步完善了数据质量管理流程和日常基础业务管理制度，实现了PMS系统数据质量管理的制度化、规范化、标准化和精细化，PMS数据质量得以有效提升，数据管理水平得以明显提高。 　　参考文献： 　　[1]赵晓锋，周庆捷.PMS实用化分析评价体系和数据质量提升的研究[J].电力信息与通信技术，2015，13（7）：101-106. 　　[2]陈孝明，阮羚.基于数据库层级的PMS实用化评价指标提升方法[J].湖北电力，2015，39（8）：9-11. 　　[3]范婷，余永忠.某供电局数据质量及实用化常态化评价体系探索[J].信息化建设，2015（11）. 3