专题19《数据迁移技术》精品.ppt

数据迁移技术 课程介绍 课程简介 本课程首先讲解了数据迁移的概念、特点和方法，然后介绍了数据迁移的整个过程，最后说明了华为3Com公司的数据迁移方法。 培训目标 学完本课程后，学员能够达到： 熟悉数据迁移的基本概念和过程 了解主要的数据迁移方法 目 录 数据迁移的基本概念 数据迁移方法 数据迁移准备和检验 华为3Com数据迁移策略 友商数据迁移软件 数据迁移的基本概念——什么是数据迁移 从应用系统角度来说，数据迁移是将历史数据进行清洗、转换，并装载到新系统中的过程。 从存储系统角度来说，数据迁移是把数据从一个存储网络设备转移到另外一个存储网络设备的过程。目的是为了平衡工作负载、系统扩充、故障恢复等。 数据迁移的基本概念——传统的数据迁移方式 策略一：应用系统停机，一次或者分多次进行数据迁移。 策略二：应用系统不停机，采用专门的迁移程序或者工具进行。迁移过程中产生的I/O资源消耗，同前台的应用程序互相干扰。 缺陷：数据迁移过程会影响到应用系统的正常工作 数据迁移的基本概念——当前的数据迁移需求 在线迁移 在数据迁移过程中，应用系统不宕机，仍然在运行。 不影响应用性能 在数据迁移过程中，不影响原有应用系统的性能。 存储设备实现 数据迁移过程对应用程序透明，在存储设备层实现。 说明：数据迁移完成后，如果要进行应用切换，需要 生产系统暂时中断 目 录 数据迁移的基本概念 数据迁移方法 数据迁移准备和校验 华为3Com数据迁移策略 友商数据迁移软件 数据迁移方法——数据迁移分类 应用层数据迁移 使用专门的程序或者工具，在应用程序层面，将数据从旧系统迁移到新系统 操作系统层数据迁移 使用操作系统的工具，将数据从一台机器迁移到另一台机器 存储层数据迁移 使用复制等技术，在存储设备层，将数据从一个存储设备迁移到另一个存储设备 数据迁移方法——不同层面数据迁移的特点 数据迁移方法——应用层数据迁移 使用专门的程序或者工具，在应用程序层面，将数据从旧系统迁移到新系统，例如： 通过数据库日志，实现Oracle数据库之间的数据迁移。 在Windows环境下，通过ODBC，实现不同数据库之间的数据迁移。比如从SQLServer迁移到Oracle。 数据迁移方法——数据库日志实现数据迁移 具体步骤如下： 在原系统生成数据库日志或者SQL脚本 将数据库日志传送到新系统 在新系统上重做数据库日志，生成新数据 数据迁移方法——操作系统层数据迁移 使用卷镜像等技术，在操作系统级别，将数据从一台机器迁往另一台机器，或者从一个存储设备迁移到另一个存储设备。例如： 使用逻辑卷管理工具，将数据从原存储转移到新存储。 在Windows环境下，使用“文件和设置的转移向导”，将系统配置和各类文档等信息转移到新机器。 数据迁移方法——逻辑卷管理实现数据迁移 具体步骤如下： 主机连接原卷 主机再连接一个新卷 原卷和新卷之间做数据同步镜像 镜像完成后，将原卷拆离，实现数据迁移 数据迁移方法——存储层数据迁移 采用备份、复制等技术，将数据从一个存储设备迁移到另一个存储设备。例如： 磁带备份方式：将SAN上的数据备份到磁带，将磁带运送到目的地，将磁带上的数据导入到新的存储设备，完成数据迁移。 使用远程复制技术，将数据从一套存储设备迁移到另一套存储设备。 数据迁移方法——基于备份技术和磁带的数据迁移 具体步骤如下： 在原系统上，将数据备份到磁带 将磁带运输到目的地 将数据从磁带导入到新的存储上，完成数据迁移 数据迁移方法——基于复制技术的数据迁移 具体步骤如下： 应用服务器正常工作 在存储端对卷进行远程复制，复制过程对主机透明 复制完成后，数据迁移也就完成 数据迁移方法——复制技术数据迁移的实现 在存储设备层通过复制技术实现数据迁移，可以有三种方式： 在同一类型的存储设备之间实现。 在不同类型的存储设备实现。 通过虚拟存储设备实现。 数据迁移方法——同类存储设备的数据迁移 在同一类型的存储设备之间实现。各个存储厂家的都有类似产品，比如： EMC Clariion系列的mirrorview HDS的Cross-System Copy NetApp的SnapMirror 优缺点： 使用简单，但受厂家和型号的限制，只用于同一厂家同型号的产品之间。 数据迁移方法——不同类存储设备的数据迁移 在不同类型的存储设备实现。这种方式下，必然有一种存储能够识别另一存储的数据。 比如： EMC SANCopy：将IBM DS4000阵列上的数据复制到EMC CX500。 优缺点： 突破了厂家限制，使用简单。但是管理和控制不灵活，提供此项功能的厂家较少。 数据迁移方法——虚拟存储设备实现数据迁