实时数据同步系统解决方案.docx

? ? ? ? ? ? ? 实时数据同步系统解决方案 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?  目录 实时数据同步系统 需求分析 产品简介 功能特点 技术优势 典型应用 用户价值 ?  需求分析 利用各种关系型数据库存储结构化数据，仍然是当前各类信息系统普遍采用的数据存储方式。随着信息化的飞速发展，对数据库数据的处理需求越来越多样性，对数据处理的要求也越来越高。比如需要进行数据的汇聚、数据的分发、数据的共享交换、数据的灾备等。无论是哪种需求，都面临着如何从数据库中采集数据的问题。 当前数据库的数据采集面临着诸多难题：数据异构严重、对数据库干扰严重、数据量巨大、数据采集的实时性不高、数据的一致性无法保证、跨网络边界交互、成本过高等。传统的数据采集方式大多采用创建触发器、临时表等数据库对象的机制实现增量数据的捕获。或者直接通过拷贝磁盘、拷贝流量等方式实现增量数据捕获。这些方式大多只能解决以上难题的其中一部分，却很难完整解决所有难题。 ? 产品简介 产品简介 天清实时数据库同步系统，简称RDS，是一款可以在各种数据库之间实现数据准实时同步的产品。由启明星辰完全自主研发，具有低影响、低延迟、高性能等特点。广泛适用于各种数据库之间的数据容灾热备、数据汇聚、数据分发、数据共享与交换等业务场景下RDS产品采用解析数据库日志文件的技术原理来捕获增量数据。只需通过交换机旁路部署在网络中，不需要安装在数据库服务器中，也不需要在数据库中创建任何的触发器、临时表等对象，即可实现数据库的增量数据捕获，对数据库的干扰几乎为零。不改变原有网络结构、无需对业务系统进行改造，将影响降到最低。RDS通过解析数据库日志文件，不但可以捕获DML类数据，还可以捕获DDL、DCL类数据，以及数据的来源信息。因此，RDS采集的数据更全面，能够更好的保证数据的一致性，以及成为数据操作行为审计的有益补充。RDS产品配合启明星辰的网闸、数据交换平台等产品部署时，可以实现跨网络边界的数据库数据采集和交互。 ? 功能特点 ?国产化： 由启明星辰集团自主研发，具备完全的自主知识产权。专业及时的售后服务响应。 ?同步过程高度可控： 全流程运行状态实时监控、交换记录细粒度审计及查询、异常实时报警。 ?支持容灾切换： 支持数据库热备容灾及主备库之间数据流向的在线切换。 ?低延迟： 支持数据的秒级延迟同步。 ?海量数据同步： 支持TB级存量数据在线迁移、日均数亿条增量数据同步、上万张数据表。 ?无缝融入业务环境： 独立服务器安装，通过交换机旁路部署，现有网络结构及业务系统无需改造。 ?数据异构同步： 支持各种软硬件平台、数据库类型、字符集、数据结构等的异构同步。 ?对数据库低干扰： 无需创建触发器、临时表等对象，无需与数据库安装在一起，两端数据库保持双活。 ? 技术优势 B/S架构 全中文图形化界面，方便快捷，更符合国内用户使用习惯。 多任务 单套产品可承载多个数据库，以及多个同步任务而互不干扰。 数据库对象迁移 可实现Oracle数据库间12种数据库对象的在线迁移。 数据选择性同步 可自主选择要同步数据的用户、表、字段，以及自定义数据过滤条件。 支持多种数据库类型 支持Oracle、MS SQL、DB2、Sybase等各种常见关系型数据库。 数据跨网复制 结合启明星辰的网闸、数据交换平台等产品一起部署，可实现数据库数据的跨网复制。 数据一致性保证 严格按照源端操作顺序还原数据，以事务方式入库，保证两端数据完全一致。 数据库日志文件解析 解析数据库的归档日志、在线日志文件，精准定位和还原增量数据。 ? 典型应用 数据库容灾热备：同城及异地数据库容灾热备。如某医院总院和分院之间的数据库异地容灾及查询分离应用： ? 数据汇聚：各部委、省、市的数据中心需要从众多的同级及下级单位数据库中采集数据，进行数据集中。或者集团总部需要从各个职能部门及下属单位采集数据： ? 跨网数据复制：结合边界隔离设备，实现数据的无干扰采集及跨网络边界的数据实时复制： 用户价值 —— 低干扰准实时数据采集：对数据库几乎无干扰，现有网络结构及业务系统无需改造；数据秒级延迟同步交换，满足业务数据高实时交换需求。—— 海量数据采集：上万张业务表、TB级存量数据、每天数亿条增量数据。 —— 数据库双活热备：对数据库数据实现在线容灾备份，两端数据库都能正常使用，实现资源高效利用，避免资源浪费。 —— 数据库查询分离：主库只进行数据的增删改，备库上进行主体分析、报表统计等查询操作，大幅降低主库运行负载。—— 高效业务协同：消除信息孤岛，各类信息系统数据实时对接，满足跨部门的业务协同及辅助决策需求。—— 低成本：部署简单、使用便捷，售后服务专业及时，大幅降低用户成本。 ? ? ? ? ?