基于AnalyticDB for MySQL基础版构建实时数据仓库实践.pdf

基于AnalyticDB for MySQL基础版构建实 时数据仓库实践 宁愚 数据库架构师 （ ） DA 2020/04/08 01 总述 内 02 DTS实时同步 容 03 SLS准实时投递 ⼤ 纲 04 DMS企业版准实时同步 05 总结 01 总述 实时构建⼤图 ⽣产业务数据库 Oracle DB2 数据传输 MS SQL Server 实时同步 AnalyticDB for MySQL MySQL PolarDB DMS/ Dataworks RDS DRDS MQ 流计算 写⼊ ⽇志数据 实时构建ADB数仓优点 查询速度快 简单易⽤ 实时化分析 解决业务库上⼤查询慢查询， 快速构建数据仓库， 减少OLTP->OLAP数据延时 全⾯兼容 协议和 ⼯具 例如报表延时 分钟内 10X加速 MySQL BI 1 OLTP与OLAP隔离 02 DTS实时同步 DTS 数据传输 （ ） 的数据同步功能旨在帮助⽤户实现两个数据源之间的数据实时同步。 通过解析 Data Transmission DTS DTS 数据源的增量⽇志，如binlog ，将增量实时同步到ADB 中。 01 多数据源⽀持 02 多粒度 03 灵活映射 04 ⽩屏化操作 • 库：整库 • 库映射 • 同步任务设置 • MySQL • 表：选择特定表 • 表映射 • ⽬标表建⽴ • DRDS • 列：表中的某⼏列数据 • 列名映射 • 灵活定制 • PolarDB • DML过滤 • 多表归并 • DDL过滤 DTS功能介绍参⻅： /document_detail/26595.html?spm=5176.55326.208404.7.6c9386fb9W8y61 DTS同步设置流程 1.创建 同步 配置任务 3.同步对象设置 4.对象映射 5.⽬标表设置 预检查并启动 DTS 2.