全闪存储在银行核心高可用系统中的应用.docx

? ? ? ? ? ? ? ? 全闪存储在银行核心高可用系统中的应用：部署实践及跑批性能提升实测 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? 【摘要】存储系统是整个IT基础架构中最重要、最关键的基础设施。特别是对于金融行业的IT基础架构来说，核心存储系统除了需要具有极高的可靠性、稳定性、容错性外，还需要能够支撑多个业务系统的强大性能和具备够良好的“两地三中心”容灾功能。本文结合我行新一代核心系统建设存储系统选型的考虑，谈谈谈全闪存储在核心等关键应用系统中的应用实践，希望能给大家提供点点参考，如有错误之处敬请批评指正。 【作者】BC，就职于某银行信息科技部，主要参与新一代核心系统相关硬件选型和基础环境搭建工作。 一、背景和痛点 此前，我行系统建设大多是个体应用为单位建设，采取“烟囱式”基础架构，大部分存储只承载个别应用系统，造成存储资源浪费或不足，数据、资源无法共享；由于当时使用的存储大多是使用HDD机械盘传统存储，存储性能比较低，对核心系统跑批带来巨大压力，特别是在季度结息或特殊时点，核心跑批时间长达十余小时，有时会出现由于跑批时间过长而影响正常营业；此外我行原运行核心系统的某台高端存储曾发生过宕机事件导致业务中断，对于存储的高可用和稳定性十分看重。 2017年，我行进行新一代建设时，对应用系统进行了“两条总线一个核心”的架构重构，包括新建、改造、升级的应用系统达七十余个。其中核心业务系统群全部新建，包括核心业务系统、总账系统、ECIF系统和柜面作业系统为关键业务系统，这些系统为未来各应用系统提供稳定、一致的用户接口和交易接口，是构成内核稳定的新一代的基础系统。同时这些系统也对存储架构的稳定和性能提出了新的要求。特别是新一代核心系统由于增加了每日计提过程，每天都需要对全量账户进行计算，相当于每天跑批类似老核心系统的一次季度结息过程，如何缩短跑批时间？这对于存储和计算资源来讲是不少的挑战。 二、选型和架构的考量点 1.要考虑成熟稳定、高可用性 对于银行的核心以及关键业务系统，大多是联机交易OLTP系统，应把系统稳定性为第一优先原则，把本地高可用作为首要考量点。一方面在存储硬件选型，必须具有极高的稳定性和容错性。要考虑存储本身架构的可靠性、部件的冗余设计、故障隔离和恢复机制、数据保护配置、在线维护升级功能等因素，尽量考虑技术成熟、稳定的产品，核心及重要系统存储尽量使用稳定性为99.9999%的高端存储。另一方面从存储厂商来看，应该充分考虑厂商的技术实力、行业应用案例以及技术支持服务能力等多种因素，要尽量保障使用具有行业广泛应用和优秀品质的产品，尽量避免冷门和具有潜在缺陷和隐患的产品，避免存储系统对整个银行IT架构带来的不稳定。 2.要考虑技术先进、前瞻规划 对于核心存储系统来说，在存储功能方面要考虑技术的先进性，比如存储多协议支持、数据自动分层、在线压缩、数据重删、精简配置、QoS功能、配置管理的便捷性等，主要根据实际需要选配和使用这些功能。在存储性能方面要做前瞻性考虑，满足多业务系统对性能的要求，并能够随着业务的发展进行平滑线性的性能和容量扩展。SSD盘在小文件、随机IO读写方面相对传统SAS和SATA盘有着明显的优势，其单块盘性能要比传统磁盘性能高出150-250倍，因此全闪存储对比传统存储有着巨大优势。 3.要考虑容灾等高级功能需求 存储系统作为数据中心的基石，在存储基础架构设计时，要统筹规划、整体设计，要站在未来两地三中心整体架构的层面考虑存储的选型和存储架构的设计。要充分考虑存储两地三中心容灾、双活数据中心、备份等需求，比如存储对于多点容灾、双活、存储快照/克隆、数据保护等功能的支撑。在存储架构上要重点考虑本地的高可用设计，考虑与其它复制技术的配合，以便平滑地向两地三中心容灾架构或双活数据中心过渡，满足监管部门对于业务连续性的要求。 4.传统存储、混合存储or全闪 全闪存阵列与传统高端存储相比，具有独特技术优势：一是全闪存阵列有着较高的IOPS和容量密度，一个标准机柜位置可以提供100万以上的IOPS，容量达PB以上，传统存储则需要4-5个机柜才能满足要求。大大减少了空间和能耗的需求，降低用户总体拥有成本；二是低I/O响应延时。闪存阵列的I/O延时低，大部分I/O在1ms以下，这样可以较少主机CPU等待时间，提高数据库主机CPU的使用率。传统高端存储在轻负载的场景下I/O延时也在5ms以上，高负载情况下延时增加明显。采用全闪存，无需存储层面性能调优，或针对热点数据的分层优化与数据迁移。三是SSD对比传统机械盘，平均无故障工作时间大大提升，SSD换盘概率约为机械硬盘1/10，具有更快的重建时间，减少了风险。四是全闪存储比传统存储稳定性可能更好。闪存盘的寿命较机械硬盘更长，性能抖动