一种基于vSAN的分布式存储系统构建和应用.docVIP

一种基于vSAN的分布式存储系统构建和应用 　　摘 要：作者研究分析了当前高校数字化图书馆的特点、任务需求，剖析了当前主流的存储解决方案优缺点，运用VMware公司最新发布的vSAN分布式存储系统技术，以上海公安高专数字化图书馆存储建设为实例，探索当前存储扩容最佳解决方案。 　　关键词：VMware；虚拟化；vSAN；分布式存储；存储协议 　　中图分类号：TP393 文献标志码：A 文章编号：1673-8454（2014）16-0072-04 　　一、引言 　　网络化、自动化、数字化等计算机技术日新月异，加快了各行各业现代化改革的步伐，图书馆业界也面临着从传统图书馆向由传统文献信息资源与数字化信息资源相结合的现代化图书馆转变的新阶段。高校图书馆的数字资源建设主要包括引进数据库、自建数据库两方面。而在后者当中，各馆特色资源的数字化以及数字特色资源的建设尤其重要，并已经逐步成为主流。高校由于其职业的特殊性，数字资源建设由于对知识和文献数据相关内容进行整理、使用、传播、共享、保存，其对于教学、培训、科研的辅助作用，乃至整体提高文化和专业素质，意义深远。 　　上海公安高专数字化图书馆系统信息基础平台一直处于建设完善过程中，随着数字图书数据批量化录入，同步还引进了各类现成的专业数图资源检索系统，数字图书资源每年容量扩充需求约10TB，随着存储大数据需求的增加，其存储需求容量随之快速增长，同时还要求扩展维护方便，快捷、保持业务不中断，安全稳定，性价比高等等，反而对存储的性能（尤其是对IOPS）没有太多太高的要求。面对需求，持续建设也刻不容缓。 　　二、传统的存储解决方案和面临的问题 　　对于高校数字化图书馆的存储现状，目前通常采用以下两种传统方法来解决数据量快速增长问题： 　　1.在原有的生产存储上进行扩容 　　如果已经具备了统一存储数据中心，可以在其架构上进行磁盘柜的扩展。按照16盘位计算，满配2TB SATA盘的扩展柜设计，考虑到安全性、RAID、热备盘以及后续扩展需求，如此配置的扩展柜可以满足图书馆系统的容量和安全需求。但这种方案也面临了以下问题： 　　（1）由于高校核心生产存储一般都会采用知名品牌，其产品价格成本高（尤其是硬件产品过保后的成本）。 　　（2）应对存储的数据安全问题，会采用增加磁盘（采用RAID技术、热备盘、多LUN）来保证，均要消耗存储磁盘，而专业存储的磁盘价格非常高。 　　（3）虽然存储的统一和整合能够提高管理的方便性，但同时核心存储的稳定性和高可用性愈发重要。任何存储故障发生，都将导致所有业务系统的停止。 　　（4）现在已有很多高校数字图书馆系统采用了虚拟化技术，如果现有核心存储已经承载了整个院校虚拟化的核心服务，比如上海公安高专的在线虚拟机数量达150台，已经承载了全校70%信息化平台服务。在此基础上若再增加数字图书系统内的多业务系统的接入，不仅现有的统一存储中心的性能受到影响，资源也将过度的消耗。 　　2.新购数字化图书馆的专用存储 　　根据数字化图书馆存储的实际需求，有的高校还会选择性价比更高的中低端存储（如国产存储），虽然从容量、性价比来说可以一时满足目前高校的需求，但从长远来看，同样也会存在以下问题： 　　（1）后续扩展性和安全问题。随着后续存储空间容量的需求，需要增加新的扩展柜，但存储机头的性能不会增加，逐步会形成“烟囱式”的存储架构，低性能存储机头后面连接很多扩展柜。不仅仅存储会面临存储性能问题，同时只要存储机头发生故障，所有数据都会无法访问。 　　（2）性能问题。中低端存储能否应对数字化图书馆后期批量导入或者突发式的访问高峰，都是疑问。到时一旦发生性能问题，在中低端存储上没有太多可以扩展的技术手段，后续风险较大。 　　（3）管理问题。后期维护和管理都无法与现有存储进行融合，也将降低管理效率。 　　传统存储解决方案都存在这样那样的问题，有没有一种崭新的技术，既可以解决存储容量、扩展性、安全性问题，又有性价比较高的存储解决方案呢？此时新发布的VMware vSAN技术步入笔者视野。 　　三、vSAN（Virtual Store Area Network）技术介绍 　　VMware Virtual SAN是全新的软件定义的存储层，可以扩展vSphere虚拟化管理程序以将计算和直连存储池化。通过建立服务器直连硬盘和固态硬盘（HDD和SSD）集群，Virtual SAN可创建专门针对虚拟机设计和优化的分布式共享数据存储。 　　Virtual SAN内置在vSphere内核中并采用分布式体系结构：利用SSD提供高性能读/写缓存，利用HDD确保经济高效的数据持久性。该技术基于高度可用的体系结构并且无单点故障。它可以应对磁盘、服务器和网络级别的故障并且不丢失