数据管理知识体系.ppt

数据管理-数据交换平台功能架构 * 数据交换服务1 应用功能 数据交换服务2 数据交换服务3 数据交换服务4 数据交换服务… 企业数据服务总线 元数据管理 安全管理 平台监控 数据采集 数据采集任务调度 数据复制 ETL工具 全量复制 增量复制 全量抽取 增量抽取 数据清洗 数据转换 数据装载 数据存储 专用数据采集接口 数据管理---数据交换（纵向横向） * 一级数据交换平台 一级业务系统 一级业务系统 二级业务系统 二级业务系统 二级数据交换平台 三级业务系统 三级业务系统 三级数据交换平台 一级ODS/DW 二级ODS/DW 横向交换 横向交换 横向交换 纵 向 交 换 数据管理---元数据管理框架 * 元数据管理平台 系统管理 数据规则管理 变化管理 业务逻辑管理 数据展现管理 外部数据 灵活查询 多维分析 报表 数据挖掘 数据利用 业务数据库 业务数据库 ODS EDW DM 数据管理--数据挖掘 * 原始数据 数据 集 目标数据 预处理数据 模 式 知 识 发现 集成 选择 预处理 数据挖掘 解释评价 运用 数据准备阶段 数据挖掘阶段 分析评价阶段 基本步骤 挖掘类型 挖掘算法 * * * * * * * * * * * * CIF 基础架构：The basic structure of the corporate information factory * * 业务建模：指对商业（或非商业）组织及其运作的流程进行的建模过程。主要包含（1）：划分整个单位的业务，一般按照业务部门的划分进行各个部分之间的业务工作界定，理清各业务部门之间的关系。（2）：深入了解各个业务部门的具体业务流程，并将其程序化。（3）：提出修改和改进业务部门工作流程方法，将其程序化。（4）：数据建模的范围界定，真个数据仓库项目的目标和阶段划分。 * 多级数据交换 * * 数据挖掘又称为数据库中的知识发现、是指存放在数据库、数据仓库或其他信息库中的大量数据中挖掘有用数据的过程。数据挖掘提供丰富的挖掘模型和灵活算法。挖掘结果转化成灵活的表格形式，并可集成其他应用中。 * GBUTtem * * 数据管理知识体系 数据管理的演进 * 风险回报： 风险非常高，因为数据问题会导致客户流失（因为错误理解客户价值）或不合理的业务流程；虽然没有制定相关的流程来分析孰是孰非，但还是有一些人成为替罪羊，从而受到指责；回报低，除了个别员工或部门获得成功之外，企业几乎没有从数据管理中获得任何收益 风险回报： 风险高，缺少数据整合，整个公司范围内数据的整体准确性不佳；偶尔会进行数据分析和更正，但涉及跨职能时仍然会发生一些数据错误； 回报有限，大多数都不确切；多数投资回报都是通过个体流程或员工个体取得的；公司层面几乎没有意识到数据管理的好处 风险回报： 风险中等到较低；通过提供更优信息提高了决策的可靠性，从而降低了风险；回报中等到高；数据质量的改进通常只局限于某个职能领域，然后随着更多员工加入其中，质量改进会拓展到更宽泛的领域 风险回报： 风险低；数据完全统一，并被严格控制，帮助企业维护有关客户、前景、库存、产品的高质量信息；回报高；在全公司范围内执行数据管理，有助于更好地理解企业当前的业务概况，帮助管理层提高在根据数据做决策时的信心 当前保险企业普遍存在不少数据的问题，如：数据来源不唯一、数据共享性差、数据准确度低、指标口径不统一等. 国内保险企业数据管理现状分析-现状 数据 管理 现状 没有独立的数据管理组织 数据生命周期 管理不完整 缺少数据 活动管理 无企业级架构 各部门用户 对数据架构 没有共识 缺乏数据质量 管理体系 缺乏数据标准 缺少主数据管理 数据安全 认识不全 无元数据管理 新一代数据中心-目标 * 新一代数据中心定义 新一代数据中心是基于标准构建模块，通过模块化软件实现自动化7×24H无人值守计算与管理，并以供应链方式提供共享的基础设施、信息与应用等IT服务 新一代数据中心特征 1：模块化的标注基础设施 2：虚拟化资源与环境 3：自动化管理 4：快速的可扩展能力 5：节能及节省空间 6：高IT资源利用率 7：高可靠性和低冗余 8：面向服务的计算平台 数据仓库设计--The Basic Structure of the CIF * External world ERP Internet Enterprise transactions Data acquisition Reference Data Applications ERP(tx) Integration/ transformation lay