云计算环境下分布存储关键技术研究.docVIP

云计算环境下分布存储关键技术研究 　　摘 要：云计算技术的中心构成部分是数据中心，它是云计算技术发展和应用的关键，强大的数据存储、处理及传输能力是云计算技术区别于传统计算技术的重要特征。但目前数据管理及组织技术水平的限制，使得云计算环境下的数据处理过程出现了大量的数据丢失或数据错误的情况，严重阻碍了云计算技术的发展与应用。鉴于此，对云计算环境下分布存储技术的发展现状及存在的问题进行分析，并提出相应的改进建议。 　　关键词：云计算技术；分布存储技术；数据处理 　　DOIDOI：10.11907/rjdk.161889 　　中图分类号：TP319 　　文献标识码：A 文章编号文章编号2016）011016104 　　0 引言 　　当前，计算机技术、信息技术和通讯技术的发展成为全球社会、经济、科技发展的重要推动力，它们已经融入到了人们生产生活的各个环节。随着对其应用程度的逐渐深入，各领域需要存储和处理的数据规模愈来愈大，这给相关技术的可持续发展带来了巨大挑战。云计算技术是计算机、存储和通讯技术发展到一定阶段后自然而然形成的一种新的计算模型，其在数据的储存和处理上与个人PC机有非常大的区别。它通过现代“互联网+机器设备”构建了一个庞大的数据中心库，并以此为基础向各领域提供数据存储、处理、分析以及计算服务。整个云计算系统的中心是数据中心，而对数据进行管理、存储以及组织的分布存储技术又是数据中心的关键。可以说，分布存储技术水平直接决定了云计算的整体水平。然而，目前分布存储技术难扩展、高成本、低容错的特性极大地限制了云计算技术的应用与发展。因此，分布存储技术的研究成为当前云计算技术研究的重点和热点。 　　1 分布存储技术产生背景 　　随着计算机应用的逐渐深入，海量数据随之产生，单一的PC机或者服务器已难以满足人们对数据处理的需求。因此，解决当前更大规模数据存储与数据计算的云计算技术应时而生[1]。 　　云计算环境下的分布存储技术指用户为了实现自己存储数据的目标，通过购买或租赁等手段，获得互联网空间，进而满足自己对数据的存储和计算需求。在云计算环境下，数据中心会对储存在其内部节点上的数据进行有序编排，通过专用的端口将用户需要的数据传输给用户，同时用户也能通过该端口将需要存储和处理的数据传输到自己购买的互联网空间中。通俗来讲，云计算就是以互联网为基础，能够使人们分享基础资源的计算模型。 　　2 云计算环境下的分布存储技术分析 　　2.1 容错性技术分析 　　传统情况下，采取RAID来提升存储技术的容错性，但这样的技术提升手段要求使用高性能的服务器，同时使用更加专业的存储设备。因此，这种提升存储容错性的手段会使成本大幅度提升，极大降低了企业的经济效益。但是，采用这种技术提升数据存储的容错性时，时常发生存储失误或错误的情况，给企业和用户造成了巨大损失，严重阻碍了云计算技术的进一步发展和应用。 　　2.2 可扩展性分析 　　提高存储可扩展性的最常用手段是预留冗余磁盘空间，这种提升手段适用于常规的存储技术。然而，目前云计算环境下所需储存和处理的数据达到了EB级别，在这种情况下，采取传统预留冗余磁盘空间的手段已经无法适应当前需要。 　　2.3 成本控制分析 　　在传统的数据存储过程中，小规模的数据交换不会产生很高的热量，不需要对数据存储设备进行降温，也不需要考虑节能问题。因此，传统的成本控制方式无法为云计算环境下的成本控制提供有效借鉴。在云计算环境下，由于涉及海量EB级别的数据存储、交换、计算，因而必须大规模增加存储空间和数据存储节点，也就必然会增加生产成本。另外，大量数据的传输和运算必然会使设备的散热量大大增加，在设备制造时必须要考虑散热问题，这在无形中也增加了实际运营成本[2]。 　　3 云计算环境下的分布存储技术构造 　　云计算环境下的数据中心主要由两方面的部件构成：软件与硬件。其中软件主要提供数据中心传输数据、计算等服务；硬件主要提供其存在环境所需要的支撑。通常情况下将其分成3种构造类型。 　　3.1 交换机构造 　　交换机结构在云计算技术出现之前就已是一种常用的分布存储技术手段，它不仅被用作数据中心，还是连接数据与用户的纽带。通常情况下，以交换机为中心的构造会形成一种树形结构，如图1所示，它由聚合层、核心层以及边缘层构成。边缘层通常由服务器和交换机构成，在数据存储时为了保证均衡的带宽环境，边缘层一定要和聚合层产生连接；在数据访问和传输时，聚合层也必须和核心层产生连接。该结构具备如下3个优点：①非常易于操作；②连接简单；③很容易实现扩展。同时其也存在一些不足：①灵活性差、资源利用率低；②带宽不足；③受聚合层结构影响较大；④发生故障后会浪费很多资源[3]。 　　3.2 服务器构