网络存储管理系统性能的优化.docVIP

网络存储管理系统性能的优化 　　摘要:存储架构与存储资源日益的复杂性,使得系统管理者必须花更大的精力投入到如何更有效的管理存储资源上。如何设计一个廉价简单易用的存储管理系统成为存储界关注的焦点。本文对网络存储管理系统性能的优化进行了探讨。 　　关键词:网络存储 管理系统 性能优化 　　 　　 针对存储管理系统的具体应用,我们主要从文件系统、网络性能和服务性能方面对网络存储管理系统进行优化。 　　 一、网络存储管理系统性能瓶颈 　　 存储管理系统嵌入在一个存储网络环境之中,想知道它的瓶颈必须先了解整个存储网络系统的结构。存储网络系统由存储设备、网络设备和客户端主机三个部分组成。存储设备是指该系统中采用的NAS、SAN、IP-SAN等磁盘阵列设备,这些设备在存储管理系统的管理下向客户端主机提供服务;网络设备主要是指FC交换机或以太网交换机;客户端主机是指安装了以太网卡、FC HBA卡,并安装了一定应用软件的主机设备。 　　 存储系统的瓶颈分析主要是看这三个部分中哪一种会首先达到其性能的最大值。存储设备成为整个系统的瓶颈,是指存储设备的带宽达到最大值,或IOPS达到最大值,存储设备限制了系统性能的进一步提升,甚至影响了整个系统的正常运行。由于不同业务系统对存储的性能要求不同,一般小文件(小于1MB)读写型的系统中对I/O的要求较高,大文件的读写型系统对存储设备带宽的要求比较高。不用应用模式下系统对存储设备的要求不同,瓶颈点出现的位置和特点也不一样。 　　 应用模式1: 　　 小型网站系统,应用大多集中于远程用户对WEB页面访问,网站内部为WEB服务器和数据库之间的读写,应用系统对存储的压力非常小,差不多所有类型、所有档次的存储设备都可以作为核心存储,存储设备的带宽和IOPS很难会达到极限。在这样的系统中,与存储设备连接的网络设备以太网交换机和接入网部分的可用带宽最有可能成为存储网络的瓶颈。 　　 应用模式2: 　　 如果该网站是一个大型的网络视频系统,支持大量用户在线进行视频节目播放和下载,这种类型的网站前端接入网一般都在2Gb/s以上。一般来讲,由于NAS设备的带宽和IOPS相对较小,因此NAS比SAN和IP-SAN设备更容易成为系统的瓶颈,而SAN和IP-SAN较难成为瓶颈。瓶颈还经常会出现在负责节目播放和下载功能的视频服务器处。如果视频服务器配置的数量不足,或视频服务器之间无法正常地实现自动地网络负载均衡,那么整个系统的性能压力瓶颈就会出现在视频服务器,使用整个视频网站无法给远程用户提供流畅的节目画面。 　　 应用模式3: 　　 非线性编辑制作系统。在非线性编辑制作网络中,所有工作站共享式地访问核心存储系统,每台工作站同时以50-200Mb/S的恒定码率访问存储设备。业务系统对带宽的压力非常大,而IOPS压力较小。存储设备内部设计时,一般会通过增加磁盘数量、增加扩展柜数量、跨扩展柜创建RAID组、增加主机通道数量等方式最大限度地利用存储控制器前端和后端的总可用带宽,使得磁盘、磁盘通道、主机通道等的总带宽大于控制器的总带宽,这样在工作站访问时存储设备时,才能最大地发挥出控制器的带宽性能。带宽瓶颈在控制器部位才能说明是最好的存储系统设计方案。 从上面的四种典型的应用模式中,在存储网络当中,对于存储管理系统最可能出现的瓶颈一般表现在三个方面:网络性能、存储服务性能(比如NAS或SAN)和文件系统。 　　 二、网络存储管理系统优化思路 　　 对于网络性能的优化,首先优化与网络设备有关,网络设备(例如网卡、集线器、网关和路由器)的选择对网络的性能表现有很大的影响,选择合适的网络硬件是非常必要的,而对于网络设备带宽参数是最重要的,由于存储网络中有大数据量的传输操作和高频率的I/O请求,因此在存储网络中应该选择带宽高的网络设备。其次是网络设计本身,我们采用IP accounting技术来定位网络设计的瓶颈,然后通过网络分割和DNS负载均衡等技术来提高网络性能。 　　 对于服务性能,主要是提高基于WEB GUI访问方式Apache服务器的性能和涉及NAS服务的NFS服务器性能和Samba服务器性能。对于WEB GUI访问方式的优化,最重要的就是优化Apache Web服务器的性能。而提高Apache服务器的方法主要有三种:第一种,通过确定已经编译好的HTTP模块哪些模块的需要的,哪些模块的是不必要的,删除不必要模块可以使Apache服务器更加专用,更加高效,从很大程度上提升Apache服务器的性能;第二种,通过调整Apache配置文件,用相关命令来调整Apache服务器的参数设置,使得Apache更加适合存储管理系统的应用;第三种,针对具体的使用环境,通过加载相关的模块来加速Web应用。 　　 对于文