金融企业分布式存储技术方案设计.docx

? ? ? ? ? ? ? 金融企业分布式存储方案设计 ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?  目 录 TOC \o 1-3 \h \z \u 金融企业分布式存储方案设计 1 1、项目概述 3 1.1 项目背景 3 1.2 项目需求 3 2、架构设计 5 2.1 硬件平台 5 2.2 总体架构设计 6 2.3 两种部署方式 7 3、网络设计方案 9 3.1 在机架式服务器上使用组网方案 9 3.2 在刀片服务器上使用组网方案 10  【摘要】本文分析了金融行业机构对于核心存储的需求、采用分布式存储方案的架构设计、网络设计。 1、项目概述 1.1 项目背景 目前我司所处的金融行业也正处于技术更新换代变革的时代，传统依托于大小机的各种系统逐渐过渡到云端，X86架构逐渐成为趋势与主流，以各大银行为代表的金融行业开始逐渐采用虚拟化与云计算技术来构建IT系统，提升IT系统的资源利用率。 计算、存储与网络之间的协调联动，构建了一个完整的云平台生态环境；传统的集中式存储由于稳定可靠，一度成为金融机构在建设IT系统时候的首要选择。然而，在新时代，新技术以及新需求的背景下，传统SAN在企业基础设施池化、云化中面临了很多问题： 存储资源弹性问题：多业务负载、资源的动态需求变化 存储扩展的问题：共享、扩展面临了诸多的瓶颈和问题（机头、前后端网络、CPU/Cache与HDD不同步问题） 形态和实施的成本、复杂性问题：独立的存储网络，建设成本高、实施复杂（初始实施、扩减容等） 容错和可靠性问题：大规模集群中容忍的故障域问题（跨机柜、跨机房），硬盘重建时间长问题 针对上述问题，近些年来新兴的基于X86平台的分布式存储系统满足了业务平台日益增长的存储需求，为业务平台提供高安全性、高可靠性、高可用性和开放性的存储服务。 基于X86平台的分布式存储系统基于分布式处理技术、虚拟化技术和集群技术实现，作为云计算资源池存储资源池的一部分，为计算资源池提供高速、可靠、安全的块存储服务。 1.2 项目需求 在大数据时代背景下，金融行业各个企业逐渐地将这些理念融合到自身业务发展之中，并加以创新，期望通过借助大数据的能力，更加深入了解客户，控制风险。金融行业机构继续推进互联网金融战略，探索互联网金融为银行卡数据挖掘、远程开户、虚拟卡发行等业务带来的新机遇，并结合市场需求和新兴技术推出网购一键支付、互联网跨行智能收付平台、云POS等新兴支付服务和产品。 一直以来金融行业机构对于数据中心的核心存储的基本要求却一直很明确： 1、高性能 移动支付业务正走在高速发展的道路上，在过去几年乃至未来几年必定会是产业各方竞争的焦点。从2015年初一直到2016年带二季度，据统计全国第三方支付市场规模一直保持着季度间20%以上的增长速度。在具体业务场景中，每秒的交易笔数也在稳步增长，尤其是在某些特定的节假日或者品牌促销日中，会迎来交易业务的高峰。从企业角度衡量，后端交易系统为了保证业务的稳定运行，势必需要对存储系统提出高性能、高带宽的严格要求。 面对超大规模的数据请求和节点数，存储系统应该有能力进行高效的均衡负载，充分发挥空闲节点的资源保障存储服务质量，提高系统的运行效能；并根据存储设备的性能为业务选择合适的存储资源，对业务进行依据服务等级协议（SLA）进行多层次自动负载均衡和调度。 2、高可靠性 对于金融行业机构来说，数据安全永远排在所有需求的首位。金融行业数据中心的存储系统首先应该具备的就是高可靠性。存储系统自身因该具有一定的容灾备份的能力，包括多副本存储、增量备份、实时快照、数据复制、数据迁移以及无条件的数据恢复能力。甚至于随着数据增长，存储规模扩大到一定程度的时候，很难在一个数据中心内进行资源管理，存储系统应该能够提供跨数据中心的数据存储服务，并支持跨域访问、异地容灾备份、异地双活等能力。 新的存储系统的高可靠性同时也应该体现在能够提供租户和业务的隔离，以及亿用户外单位、以业务为单位、以存储硬件为单位的数据隔离策略上，通过丰富的管理策略，进一步保证数据安全，为数据中心的长久无错运行保驾护航。 3、扩容方便 面对互联网金融和普惠金融的发展，现有的数据中心无法像以前一样预估资源的消耗，因而，没有办法保证一次性采购足够的存储，从另一个角度来说，预估采购会造成资源的阶段性冗余和浪费。 在存储设备的使用过程中，任何企业不可避免的会遇到调整存储资源池的需求。要求存储资源池根据业务的需求增加或者减少存储设备并且会要求在调整的过程中，尽量减少对业务的影响，即业务不能被中断。因而一个支持平滑扩容，无需中断业务即可无缝扩展的存储架构是现有背景下所急需的。 基于X86的分布式存储系统能够针对业务