数据质量管理系统建设方案.pptxVIP

数据质量管理系统建设方案 数据质量管理系统建设方案 第1页 目录 现状及系统定位 系统架构设计 核心功能介绍 系统特点 数据质量管理系统建设方案 第2页 数据质量管理现存问题及制约原因 制约原因 系统应用对象不明确、系统应用层级定位不清 因定位不清造成系统界面设计不能满足各层级需求 系统适应性不能满足地域性、个性化需求，差异显著 缺乏针对数据质量管理标准化流程及沟通机制 系统适用性不强，未强调数据质量管理，更多偏向于数据上报及下发管理 数据质量校验规则不全方面、针对网省适用性相对较差 不具备自建指标校验能力 技术元素造成业务人员无法使用系统 运维等人员对业务不清造成数据质量无法及时得到确认 业务人员对运维人员依赖性强 数据质量不受控制直接上报国网 源数据提供人员无法使用系统，无法对上报数据进行确认 不支持校验规则自定义修改 无数据质量预判机制 缺乏数据质量问题分析、归集及经验共享机制 缺乏考评通报机制 数据质量查询功效不完善 问题 数据质量管理系统建设方案 第3页 趋于严谨数据质量评价考评规则 上月28日 本月5日 本月8日 本月15日 当前总部数据质量 考评过程 上月28日 本月8日 本月15日 只允许省（市）上报一次，不允许修改 系统生成较难明细数据与上报数据增加防修改加密码，增加上报审计功效 1 后期总部数据质量 考评过程 一次性出具《运行监测控数据质量阅读通报》 2 数据质量管理系统建设方案 第4页 提供友好、易操作数据质量管理界面 系统应用满足运监人员、业务人员及系统运维人员需求 建立数据质量异常在线沟通及数据调整流程 提升数据质量管理 省企业运监数据质量提升 系统建设目标及定位 定制化开发 建设自定义数据校验规则，满足省企业实际业务运行现实状况 依靠数据质量管理方法，有效结合制度及管理文件，经过系统落地建立省企业当地数据质量问题归集共享平台 建立省企业数据质量评价功效，促进数据接入质量提升 提供数据质量问题继而辅助功效 缩短数据质量校验频度，提供预判功效 接口及数据链路监测能力提升 数据质量监测能力提升 实现省运监中心对企业业务数据产生、数据接入到汇总计算结果全过程、可视化监测管理，确保数据完整、准确、及时高质量接入及上报。 数据质量管理系统建设方案 第5页 目录 现状及系统定位 系统架构设计 核心功能介绍 系统特点 数据质量管理系统建设方案 第6页 系统应用设计 数据质量管理系统建设方案 第7页 功效清单 功效点 功效点描述 系统管理 包含资源监测、配置管理、安全管理、备份恢复、日志管理等 数据加工 经过对计算规则库进行配置，提供计算引擎和统计服务，实现数据加工 数据存放 对存入数据转存需求进行处理，提供数据压缩服务 数据处理 对接入数据质量管理系统数据进行正确性检验、格式转换、标准统一，并提供数据调整功效 数据访问 跨平台数据访问服务及数据访问服务 数据接入传输 提供数据接入及传输通道 元数据管理 数据监测点管理及维护，映射关系模型维护等 数据质量评价 依照管理制度对数据接入情况进行排名比较 数据看板 对系统各个步骤运行情况进行统计、分析、展示 支撑工具 门户集成、二次开发接口等支撑服务 数据质量管理系统建设方案 第8页 系统集成设计 数据质量管理系统建设方案 第9页 物理布署设计 数据质量管理系统建设方案 第10页 系统安全设计 安全控制点 防护策略设计 身份认证 1、设置密码存放和传输安全；2、保护身份验证Cookie； 3、同一用户同时只允许登录一个； 授权 1、设计资源访问控制方案，验证用户访问权限；2、限制用户对系统级资源访问；3、设计统一访问控制机制； 输入输出验证 1、设计验证全部起源不在可信范围之内输入数据；2、应在服务器端和客户端都应进行输入验证；3、应对输入内容进行规范化处理后再进行验证，如文件路径、 URL地址等，需要规范化为标准格式后再进行验证； 配置管理 1、应使用最少特权进程和服务帐户；2、应防止应用程序调用支撑系统资源； 3、单独分配管理特权； 会话管理 1、设计登录成功使用新会话；2、设计会话数据存放安全； 3、设计会话安全终止；4、设计合理会话存活时间； 加密技术 1、不使用自创加密方法； 参数操作 1、确保用户没有绕过检验； 2、应验证从客户端发送全部数据； 异常管理 1、使用通用错误信息； 2、