原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
一、项目背景
某银行在2014年建设数据中心时采购了2套存储设备，当时容量规划满足是3至4年的需求，可用容量为45T，预计存放300台虚拟机的数据，这些虚拟机运行着除核心系统以外的所有关键业务。由于这两套存储设备已经上线运行了五年多时间，存储设备的存储空间使用率都接近80%安全值，因此我行启动双活存储设备升级替换采购项目，采购两套新存储设备替换现网两套存储,并将核心业务的业务虚拟机和文件系统迁移至新采购的两套上运行。通过新老存储的替换，满足我行未来数据增长和业务发展需求。
二、存储架构技术路线选型和功能测试
（一）技术路线选择
我行在2014年通过两套存储设备构建的银行数据中心同城双活的高等级灾备体系架构，对于重要信息系统的安全稳定运行起到了关键作用。该套双活存储的灾备架构经受了各种考验，包括单台光交机故障、裸光纤光衰异常等情况下也没有影响生产主中心的系统运行。双活存储架构降低了日常运维成本，各系统只需要维护一套生产环境，避免了人为运维灾备失效时导致无法切换的问题。
因此，我行通过灾备技术的跟踪和对比，计划未来继续在数据中心采用双活存储的解决方案来构建开放平台的数据中心业务连续性架构体系。
（二）存储功能测试
（1）调研存储厂商
我行在调研主流存储厂商时，重点关注同城双活案例数量、是否支持对称双活、是否支持NAS、产品关键功能和厂商报价等多个方面，选择了存储业界主流厂商华为、EMC、HDS、HP等进行调研和交流，并开展严格的POC测试。
（2）设计测试案例和场景
我行根据近几年双活存储的实际运维经验以及双活存储的设计原理制定了全面的测试用例，常见的用例有：主机层、存储层少量链路中断，一台存储的单个引擎故障，主备中心的一条复制链路中断等；极端情况下的用例有：主备中心任一台存储完全故障，主备中心的所有复制链路中断，主机出现APD（所有路径丢失）故障，主机出现PDL（连接存储路径永久丢失）故障，以及存储和仲裁同时故障等这些日常运维中不常见但有可能出现的场景。对所有故障测试场景都是采用直接断电的形式进行，最大程度的模拟突然停电等极端情况。测试包含硬件冗余性测试和性能测试。硬件冗余性和性能测试又分别包括单存储和双活存储的测试。测试内容如下：
编号
测试内容
1
访问CIFS共享
2
访问NFS共享
3
NAS双活的创建和删除
4
NAS双活主从切换
5
本地LUN和双活LUN的性能测试
6
双活LUN扩容
7
双活优先站点存储故障
8
双活非优先站点存储故障
9
站点间FC拉远传输链路单链路故障
10
站点间FC拉远传输链路全部故障
11
仲裁服务器故障
12
仲裁服务器和优先站点存储同时故障
13
仲裁服务器和非优先站点存储同时故障
14
非优先站点存储和仲裁服务器同时故障
15
优先站点存储和仲裁服务器同时故障
16
非优先站点存储业务端口故障
17
优先站点存储业务端口故障
18
非优先站点存储到仲裁服务器链路故障
19
优先站点存储到仲裁服务器链路故障
20
仲裁服务器链路全部故障
21
双活存储复制链路单链路故障
22
双活存储复制链路全部故障
23
虚拟机APD
24
单存储NMP和Ultrapath多路径性能对比
25
双活存储NMP和Ultrapath多路径性能对比
26
日志服务器系统性能测试
27
数据仓库业务系统性能测试
28
重删压缩性能测试
29
控制器故障测试
30
电源模块故障测试
31
SAS级联线缆故障测试
32
硬盘框级联模块故障测试
33
接口模块故障测试
34
硬盘故障测试
（3）POC测试结论
通过POC测试，当前主流存储厂商基本都通过了上述功能和用例场景的测试，不同厂商的产品，在测试中表现的效果也有一些差异。
（三）招标采购
通过公共招标，最终华为公司的OceanStor18000系列高端存储选型中标了我行的存储升级扩容项目。
以下章节将介绍我行使用两套华为存储OceanStor18000系列高端存储设备，替换老的存储设备，创建新的双活集群，建立双活容灾机制，保障我行的业务连续性。
三、存储架构方案设计
（一）双活存储组网架构
下图是我行使用两套华为高端存储设备在两个数据中心之间构建双活存储架构图：
1、四台光纤交换机两两级联，并承载主机到存储的通信（块业务）。
2、两套华为Oceanstor18000系列高端存储之间通过光交交换机互联，承载心跳通信和数据同步。
3、两台10GE以太网交换机和与现网VMware仲裁业务网络打通，组成仲裁网络，当两端存储系统间链路故障或设备故障时，由仲裁服务器根据仲裁结果决定由哪一端存储继续向主机提供业务。仲裁服务器配置两个网口，分别处于不同的网段，一个网口与两套华为OceanStor18000系列高端存储的L1M0P0/L1M1P0/R1M0P0/R1
文档评论（0）