业务数据全生命周期管理工作思路课件.pptVIP

业务数据全生命周期管理工作思路 1 目 录 1 数据管理背景及目标 2 数据全生命周期管理 3 数据管理工作流程 2 1.1 数据管理的外因 -- 金融行业监管的相关要求 《银行业金融机构数据治理指引》 银保监发【 2018 】 22 号 银行业金融机构 1 应当制定全面科学有效的 数据管理制度 ，包括但不限于 组织管理、 部门职责、协调机制、安全管控、系 统保障、监督检查 和 数据质量控制 等方 面。 《商业银行数据中心监管指引》 银监办发 [2010]114 号 应建立数据安全管理制度，规范 数据的产 生、获取、存储、传输、分发、备份 、恢复和清理 的 管理 ，以及存储介质的台 帐、转储、抽检、报废和销毁的管理，保证 数据的 保密、真实、完整和可用 。 《商业银行信息科技风险管理指引》 银监发 [2009]19 号 ? 建立实施 信息分类保护体系 ，培训员工信息保护流程。 ? 严格管理 备份、恢复、清理和销毁 客户信息 的 采集、处理、存贮、传输、分发、 。 ? 保存 交易记录 ，确保 完整性，安全保存和可恢复 。 《金融行业信息系统信息安全等级保护实施指引》 JRT0071-2012 ? 对重要信息资源设置 敏感标记 ，依据安全策略严格控制用户 对有敏感标记重要信息资源的操作。 ? 检测 系统管理数据、鉴别信息和重要业务数据在采集、 传输、使用和存储过程中完整性 ，并采取必要的恢复措 施。 ? 应采用加密或其他有效措施实现系统管理数据、鉴别信息和 重要业务数据采集、传输、使用和存储过程的保密性。 3 数据管理的外因 -- 国际会计准则等业务管理需求 银行的数据保存周期策略，最常用的经验法则是 13 个月规则和 7 年规则。 确保数据集至少有一个完整年度的数据周期，能够看到一个完整年度的数 据，这通常是数据保存周期的最低要求。 越来越多的需求要包括去年加上今年的数据，这样会要求设置 25 个月 ， 使得能够处理 2 年 以上时间段的数据分析。 主要应用于内部管理的数据使用，受业务使用需求驱动。 此类规则主要是受税务及其它报告法规的需求驱动，在国际会计准则下， 一般都要求保留 7 年 的 可查询业务场景数据 。 此规则也是为适应经济情况分析的需求，基本近似于 一个完整的经济 周期 ，对于制定合理的业务规划预算是非常重要的分析数据源。 4 1.1 1.2 数据管理的内因 — 监管审计和经营分析和数据查询需求 5 1.2 数据管理的内因 — 解决关键系统数据库容量管理问题 交易访问 明细查询 数据调用 在线 生产数据 归档瘦身 数据迁移 近线 生产数据 归档库 结构数据 非结构数据 归档瘦身 按需回退 降低成本： 按业务与技术分析要求，控制生产在线数据容量，降低高端存储的容量成本 提升性能： 通过迁移并清理历史数据，重新回收数据库的存储资源，提升应用系统交易与批量性能 有效处置： 将生产数据库容量控制在较小的范围内，在发生数据库等故障的情况下，便于快速处置 6 目 录 1 数据管理背景及目标 2 数据全生命周期管理 3 数据管理工作流程 7 2.1 数据的全生命周期管理 — 定义 ? 数据全生命周期管理 ：是指根据数据价值随时间推移的演化关系，提供高效、低成本、安全、访问便捷的管理架 构。 ? 数据全生命周期管理贯穿于 数据产生 （开发设计、投产变更）、 数据使用 （采集、修改、存储、调阅）、 数据保 管 （备份、恢复、测试）、 数据销毁 等各个环节。 保存与归档 安全与保护 访问与 查找 创建 回收 活跃 10% 半活跃 20% 静态 70% 大多数是非结构化 8 数据的全生命周期管理 — 目标 数据是我行的重要资产之一，健立健全数据管理体制，满足监管要求，提升数据管理能力，充分发挥数据价值， 为经营决策提供有力支撑，已成为当前科技工作的主要任务。 规范管理 优化存储结构 ? 通过规范数据的生命周期管 ? 优化数据存储结构，有效控制在 理，提高数据的整体管理水 线数据规模，提高生产数据访问 平，满足监管要求。 N orm O ptinize 效率。 周期管理 全生命 提高效率 E fficiency S upport 数据支撑 ? 提高系统资源使用效率，确保系 统安全、稳定、高效运行。 ? 做好历史数据管理，为客户服务 和经营分析提供数据支撑 9 2.1 ? 2.1 数据的全生命周期管理 — 方案 实现历史数据的“管、控、查” 管理对 象 数据存放策略 在线 DB 数据 访问方式 平台 接口 生产数据库 归档 / 历史数据库 大数据平台 近线 离线 在线访问 结构化 数据 DB 专门工具访问 专门工具访问 恢复后访问 在线访问 备份工具 / 磁带 生产存储 内容检索平台 备份工具 / 磁带 非结构 化 数据 专门工具访问