集群NAS存储技术及其产品选型要点.docVIP

集群NAS存储技术及其产品选型要点 　　[摘 要]当前，信息数据呈爆炸式增长，存储需求急剧膨胀，集群NAS磁盘存储技术及其产品应运而生。本文根据存储设备项目选型的实际经历，较为系统地阐述传统NAS网络存储技术的优点及局限性，总结分析目前集群NAS存储的典型系统架构及其技术特点，提出衡量和评价高效集群NAS存储的具体指标或标准。 　　[关键词]NAS存储；集群；横向扩展；架构；选型要点 　　doi：10.3969/j.issn.1673 - 0194.2015.16.125 　　[中图分类号]TP333 [文献标识码]A [文章编号]1673-0194（2015）16-0-03 　　0 引 言 　　当前，信息数据呈爆炸式增长，存储需求急剧膨胀，文件大小和数据规模从TB级、PB级迈向EB级、ZB级。研究显示，2020年数字宇宙将达到35.2 ZB（1 ZB=100万 PB=10亿 TB），比2009年的0.8 ZB猛增44倍。卫星测绘、气象科学、能源勘探、航空航天、科研教育、基因测序、医学影像、公共事业、媒体娱乐和社会化Web等大量数据密集型应用导致数据“井喷”，不断对存储方法提出新的严峻挑战。 　　据IDC的统计，在快速增长的信息数据中，基于文件类型的非结构化数据的增速极快，全球存储市场的总出货量中将有80%的容量被文件级数据所覆盖。由于非结构化内容的存储规模和复杂程度不断提高，使得传统存储系统捉襟见肘。另外，非结构化数据具有传统存储系统在设计时并未考虑的独特特征，包括大型文件和数据量、高吞吐量要求、读取密集型访问方式以及大量并行文件访问。 　　为此，集群存储、并行存储技术应允而生，其性能可随着存储容量的增加而线性增加，是解决海量非结构化数据存储的理想方案。目前，国内外各大专业存储厂商纷纷推出了自己的集群NAS存储产品。面对众多的集群NAS存储产品，如何正确选择是广大用户面临的主要问题。 　　1 NAS存储技术特点分析 　　NAS（Network-Attached Storage，网络接入存储）采用TCP/IP网络技术，通过网络交换机连接存储系统和服务器主机，建立专用于数据存储的存储私网。随着IP网络技术的发展，NAS存储技术发生了质的飞跃。随着万兆以太网及InfiniBand网络的出现和投入商用，存储网络带宽大大提高了NAS存储的性能。另外，由于NAS存储采用TCP/IP网络进行数据交换，TCP/IP是IT业界的标准协议，不同厂商的产品（服务器、交换机、NAS存储）只要满足协议标准就能实现互连互通，无兼容性要求。 　　然而，传统的NAS存储系统由于受到其物理组成（如控制器性能、总线性能、磁盘驱动器的数量、所连接服务器的数量、内存大小以及NAS头的性能等）的限制，以及功能上的局限（如支持文件系统的容量、元数据和数据处理通路的耦合、快照或复制的数量等），造成存储系统瓶颈。为解决这种单个NAS系统的性能局限性和整个数据带宽瓶颈，一是采用硬件更加强大的单个存储系统，即所谓不断向上扩展（Scale-up，也称纵向扩展）的模式。然而，由于业务和数据的大量增加，尽管单台NAS的最高容量已达到PB级，仍难以满足要求，这种不断向上扩展的模式几乎已走到尽头。二是面对越来越多的数据，企业用户只好不断购买越来越多的NAS存储，这样一来，NAS存储就和以前的DAS和SAN一样，形成了新的“信息孤岛”――多文件系统，多命名空间，多个挂载点。这给企业应用和系统管理带来了诸多不便。 　　于是，横向扩展（Scale-out）的NAS存储技术，即集群NAS应运而生。采用若干个普通性能的存储系统来组成“存储的集群”，可提供按比例增加的存储资源的性能、容量、可靠性及可用性，突破了单机设备的种种限制，并且具有容量和性能线性扩展的优势。这就如CPU技术，从不断地提高频率转变为增加内核。 　　2 集群NAS存储系统架构 　　从整体架构看，集群NAS由存储子系统、NAS集群（机头）及其互联网络组成。存储子系统可以采用存储区域网络SAN、直接连接存储DAS或者面向对象存储设备（Object-based Storage Device，OSD）的存储架构。根据所采用的后端存储子系统的不同，可以把集群NAS分为3种技术架构，即SAN共享存储架构、集群文件系统架构和pNFS架构。 　　2.1 SAN共享存储架构 　　这种架构后端存储采用SAN，所有NAS集群节点通过光纤连接到SAN，共享所有的存储设备，通常采用SAN并行文件系统管理并输出POSIX接口到NAS集群。SAN并行文件系统通常需要元数据控制服务器，可以是专用的元数据服务器，也可以采用完全分布的方式分布到SAN客户端上。NAS集群上安装SAN并行文件系统客户端即可实现对SAN共享存储的