适用于TB级数据库跨平台快速迁移方法研究.docVIP

成果上报申请书 成果名称 适用于TB级数据库跨平台快速迁移方法研究 关键词索引（3～5个） 存储虚拟化;数据库;跨平台;快速迁移 应用投资 产品版权归属单位 对企业现有标准规范的符合度：（按填写说明5） 无 成果来源：如果该成果来源于集团研发项目，请填写研发项目年度、项目名称及类型（按填写说明6） 省内自立项目：中心资源数据库迁移 专利情况：如果该成果产出相关专利，且专利处于国知局专利申请审查阶段或已授权，请说明专利名称、类型、申请号、状态、是否海外申请等情况。（按填写说明7） 无 成果简介：简要描述成果目的和意义，解决的问题，取得的社会和经济效益。 传统数据库迁移方法往往存在耗时较久、停机时间过长、业务中断影响范围较大等问题，若使用第三方软件如GOLDGATE进行迁移则需要高额软件费用。针对此问题，我们提出了Portable Data Containers(PDC可移动数据封装)技术与Transportable Database（TDB数据库传输）技术相结合的海量数据库迁移方案， 使操作系统/存储层面和数据库层面数据迁移达最优组合， 并在本次中心资源库迁移中得到有效实践,实现跨平台迁移现网5T庞大数据量仅停机2小时，停机时间较传统跨平台迁移方式大为缩短，减少了因业务中断带来的经济损失，高效保障了业务连续性和可用性，取得显著效果。 省内试运行效果：描述成果引入后在本省试运行方案、取得的效果、推广价值和建议等。 中心资源库是NGBOSS核心数据库之一,现网数据5T，由于设备更换需要将原SUN主机迁移至HP主机, 生产端存储由USPV(ST9990v)迁移到富士通DX8700，本次迁移由于采用了PDC和TDB结合的迁移方案，停机时间控制在2小时以内，较其它传统迁移方案缩短停机时间8小时以上，高效保障了业务连续性、可用性， 对往后NGBOSS核心系统数据库迁移也具极大的指导意义。 同时，由于本次中心资源库迁移践行低成本高运营原则，避免购买第三方软件，节约费用约100万。 文章主体（3000字以上，可附在表格后）：根据成果研究类别，主体内容的要求有差异，具体要求见表格后的“填写说明8”。 适用于TB级数据库跨平台快速迁移研究 一、项目背景 (一)存在的问题 随着电信运营商用户规模持续稳定增长和业务的不断发展，随之而来的是业务数据量的大量增长，而承载关键业务的NGBOSS核心业务系统数据库如中心资源库、营业库、账务库等更是日益庞大。在日常运维过程中，当硬件资源不足以保障数据库系统稳定运行时，不可避免的面临数据库迁移问题。针对TB级别的海量数据库，如何在保护业务数据的前提下，安全快速实施数据库迁移，尽可能缩短业务影响时间，降低割接过程对业务的影响，是当前面临的重要挑战。 针对此问题，需要从根本上制定科学、完善、高效的数据库安全迁移方案。安徽省公司认真分析了影响数据库迁移的主要环节， 对基础环境、数据库迁移、应用系统迁移测试等环节重点把控，主要分为以下三个目标： 1.检查源端、目标端的数据库运行环境，建议/实施合适手段以保障数据库的平稳迁移。 2.在保障业务数据的前提下,数据库迁移以尽量缩短割接时间为首要指标，并制定合理的快速回退预案。 3.尽可能缩短业务系统迁移时间,制定完善的应用系统测试用例, 以保障迁移前后的业务连续性、可用性。 安徽省公司现阶段，基于基础环境管控已有诸多规范，并拥有大量的应用迁移测试案例可供借鉴,而生产数据由生产端迁移至目标端过程中，如迁移时间掌控不足,则存在次日业务中断风险。安徽省公司经过对传统迁移方案进行仔细分析发现，传统数据库迁移方案如数据导入导出、第三方软件(如GoldenGate)等，有效实现数据的跨平台迁移，但均存在迁移时间较长的特点。 显然，面对电信运营商NGBOSS核心业务系统TB级庞大数据量，传统数据迁移方案已无法满足快速迁移需要，研究一种基于TB级海量数据库安全快速迁移方法，实现高效运维，已势在必行。 (二) 解决方案 传统oracle数据库迁移方案主要有以下四种： 1.数据导入导出 主要通过exp/imp或expdp/impdp实现, 该方式通过先从源端数据库导出备份文件，再将此文件导入目标端实现，操作简单、易实现。该方式无需考虑操作系统平台和数据库版本，但其数据传输过程需通过FTP或TCP进行,且数据导入导出过程耗时较久，主要适用于数据量较小的中小型数据库迁移。 2. GoldenGate等第三方软件 GoldenGate 软件是一种基于日志的结构化数据复制软件，它通过解析源数据库在线日志或归档日志获得数据的增量变化，再将这些变化应用到目标数据库，从而实现源数据库与 目标数据库同步。GoldenGate 可以在异构的IT基础结构（包括几乎