MSPE-技术类-4-存储缓存技术-v12.pptxVIP

MSPE培训教材—存储缓存技术 缓存：决定存储性能的关键因素 计算 传输 存储 型号 IO总带宽 浮点运算 四核CPU 20-100GB 20-100亿次 DDR3内存 10-50GB 100亿次 型号 背板带宽 转发能力 数据中心 交换机 20-100GB 2-10亿次 型号 带宽 随机IO Intel SSD (R710) 270MB 读：3.85万 写：2000个 15000转 SAS 150MB 250个 7200转SATA 110MB 120个 性能相差上万倍! 解决 之道 缓冲池 （容量、性能、调度) 高速 （计算、传输） 低速 （硬盘介质） 存储缓存的用途 从使用角度而言，存储缓存的主要用途包括三方面： 读、写数据缓存 真正意义上的存储缓存，一般而言读缓存的容量大于写缓存。 缓存保护机制主要针对写缓存。 数据管理功能的需求 存储的数据管理功能越丰富，对缓存的需求越大。比如：复制、快照、快照视图、自动精简配置、CRAID、ICMT等。 存储系统的自身需求 存储阵列的操作系统自身也需要占用一定的缓存空间，大小从几百兆到几GB不等。 Tips：硬盘也具备缓存，单块硬盘的缓存为16-64MB。为保障数据的可靠性，企业级存储阵列一般都将硬盘的缓存设置为关闭状态（监控存储除外）。 专业存储系统设计的核心 性能 传输速度 访问带宽 分配调度 缓存 容量 最大容量 按需配置 可靠性 缓存镜像 掉电保护 缓存是衡量产品档次的关键指标 EMC 高端 IBM 中端 低端 宏杉科技 MS7000 2TB缓存 2048块硬盘 MS2500 16GB缓存 266块硬盘 MS5080 288GB缓存 1016块硬盘 MS3000 64GB缓存 516块硬盘 VMAX 40K 2TB缓存 3200块硬盘 VMAX 10K 256GB缓存 1080块硬盘 VNX7500 96GB缓存 1000块硬盘 VNX5100 8GB缓存 75块硬盘 DS3500 4GB缓存 192块硬盘 V7000 32GB缓存 480块硬盘 DS8800 384GB缓存 1536块硬盘 MacroSAN缓存机制 基本功能 支持全局性读、写缓存设定 支持按LUN打开、关闭缓存 支持单控制器开写缓存（针对监控） 电池模块故障开写缓存（针对监控） 智能分配 缓存按需分配 智能分区管理 全局性缓存调度 安全可靠 支持高速缓存镜像 支持断电数据下刷到磁盘 超大容量 支持双控最大288GB的缓存扩展 同一产品型号支持不同容量缓存配置 MS5000的缓存设计 超大容量高速缓存 9根内存插槽，单控最大144GB，双控最大288GB 内存访问加速 CPU直连内存，提升内存访问效率，带宽达256Gb 支持DDR3，频率800/1066/ 1333G Hz 高速缓存镜像 采用PCIe 2.0技术，单通道带宽5.0Gb，缓存镜像采用PCIe x8，带宽达到40Gb PCIe x8 40Gb DDRIII内存 DDRIII内存 ... Jasper多核处理器 SAS控制器 SAS Expander PCIe x8 40Gb SAS x4 24Gb 南桥 管理GE口 串口 指示灯 按键 SAS接口 SAS接口 SAS x4 24Gb MS5000 存储控制器 RAID引擎 DMI 9根 缓存镜像 SATA Disk SAS Disk SSD Disk 磁盘类型 256Gb 1Gb iSCSI 10Gb iSCSI 10Gb FCoE 8Gb FC IO模块(IOH) QPI IO Slot IO Slot PCIe x8 40Gb 100Gb 主机通道 写缓存镜像保护 处理器 缓存A 镜像B 缓存B 镜像A 通信通道 处理器 PCIE 目标和作用 缓存镜像只针对写缓存，读缓存不需要镜像。 避免由于单个控制器失效所导致的缓存数据丢失。 工作原理 采用写缓存镜像技术，同一份数据被同时写入到两个控制器的缓存当中。 镜像通道的带宽和可靠性要求高，一般通过控制器的背板互连。 镜像机制 平均分配：控制器的写缓存的容量平均分配，50%给自身，50%给对端。 按需分配：控制器根据负载情况按需分配，无需对称。 智能缓存调度 容量按需分配 读、写缓存根据实际情况分配，不需要按照物理大小平均分配 两个控制器的业务压力无需对称，可充分发挥控制器的性能 缓存按LUN动态分配管理 智能缓存分区 预留区：每个LUN初始分配的缓存区域，平均分配 共享区：活动状态的LUN可用的缓存区域 突发区：非活动状态的LUN的突发流量缓存驻留区域 高效的缓存调度 根据LUN压力自动调整，单个LUN不存在性能瓶颈，整个系统的缓存利用率高 预留区 共享区 突发区 30% 50% 20% 读缓存 缓存A 镜像B 读缓存 控制器1 控制器