实时数据复制CDC产品方案.pptVIP

* * Slide * Copyright ? 2005 Insight - All Rights Reserved Insight ? ——实时数据复制CDC产品介绍 Slide * Copyright ? 2005 Insight - All Rights Reserved BI技术的领导者 BI服务的领导者 广泛的合作伙伴 产品架构师：数据仓库之父 Bill Inmon 商务智能开创者 关于Insight 商务中心：伦敦 研发中心：爱尔兰 意大利 领域：咨询服务 支撑中心遍布全球：欧洲、北美、亚太、中国 Slide * Copyright ? 2005 Insight - All Rights Reserved 电信四大运营商—中国BI应用先行者 中国电信 电信集团数据门户系统 电信集团财务分析系统 浙江电信企业数据应用门户 杭州电信日报系统 青海电信CRM 中国移动 中国移动集团BAM系统 中国移动集团DMBI系统 中国移动集团BOSS分析监控系统 上海、广东、山东等7省移动BOSS分析监控系统 中国网通 浙江网通网上营业厅报表分析系统 海南网通 网通国际 内蒙网通财务分析系统 中国联通 中国联通UNI BI系统 广东联通网格化BI系统 Insight CDC Insight CDC 独有的Oracle数据库LOGO文件解析技术，在对生产库几乎没有影响情况下，把数据实时复制出来，做分析和查询用。 强大的跨平台数据复制解决方案，支持任何平台上的数据库。 支持几乎所有主流数据库的双向、实时复制传输 。 独立的软件运行平台。 友好的用户管理和配置界面 轻量级的程序，安装方便、快捷。 较低成本，较短投资回报周期 Insight CDC工作流程 分析日志 重做日志/归档日志 源引擎和元数据 目标引擎和元数据 TCP/IP 基于JAVA GUI的管理配置图形界面 数据库 ODS JMS 业务流程 平面文件 审计 直连到已有的ETL Insight CDC应用领域 数据复制应用 ODS系统 数据仓库 生产报表系统 数据接口系统 数据集中 数据分发 … … 从源系统上实时抽取增量数据； 目标系统数据（开状态）可被实时查询和使用。 Insight CDC产品特点一 Insight CDC产品特点二 Oracle IBM DB2 for i5/OS IBM DB2 for z/OS IBM DB2 UDB Microsoft SQL Server Microsoft Access Sybase ASE Sybase SQL Anywhere MySQL SolidDB for MySQL Cloudscape Teradata Netezza Informix Ingres PostgreSQL EnterpriseDB Gupta SQLBase Firebird Solid ANTs 目标端支持多种数据库 Insight CDC产品特点三 单向1:1复制,可实现完全复制和选择性复制 N:1复制,可实现企业数据整合 统一报表 统一经营分析 数据统一稽核等 1:N复制,可实现企业数据分发 数据共享 企业应用集成 数据分布式查询等 双向1:1复制,实现双数据中心,实现业务分担 层级递进，多极机构的实时数据获取 Insight CDC产品特点四 Vertical partitioning Horizontal partitioning H V partitioning 选择表抽取 表内指定数据抽取 按需获取数据 Insight CDC产品特点五 部署方式灵活 源机（生产机） 目标机（如ODS/DW） 第三服务器 Insight CDC产品部署于独立一台服务器上，不需要在生产机或者目标机上装任何产品。 对生产机没有任何潜在威胁。 大大减少部署的难度和维护的成本。 Insight CDC产品特点六 图形化的复制配置向导(生成XML配置文件)，使用和维护方便 以其它方式编辑XML文件 Insight CDC产品特点七 特殊对象的优化处理 CLOB、BLOB 压缩表 Merge MAP方式 PK表/无PK表 … … Slide * Copyright ? 2005 Insight - All Rights Reserved 关注点 可靠性 高性能 低影响 日志分析速度的压力 　　浙江电信：日志分析峰值可达每小时200-400G 目标端数据装载压力 　　 浙江电信：每秒钟完成30000条update操作 　　　　　　　 每秒钟完成100000条insert操作 高性能 Insight CDC确保正常情况下的源端CPU占用在0-5%左右 不会造成源端系统的业务处理能力的大幅