对等结构的网络软RAID系统的设计及实现.pdf

对等结构的网络软 RAID 系统的设计与实现 吴英 谢广军 刘璟 （南开大学信息技术科学学院，天津，300071） E-mail ：wuy_nankai@263.net 摘 要：随着计算机技术与网络技术的快速发展，网络分布式存储逐渐成为存储技术研究的 重点。本文设计并实现了对等结构的分布式存储系统—NDSS，它可以提供大容量、高性能、 高可靠性与灵活扩展的存储服务。本文介绍了 NDSS 的系统结构、工作原理与关键技术，并 提供了对系统访问性能的实验测试结果。 关键词：对等结构 分布式文件系统 分布式共享内存 1 引言 文件系统作为分布式存储系统中数据的组织者与 随着计算机技术的发展和计算机应用的普及， 管理者，为上层的应用程序提供对存储系统的文件 计算机的作用已不仅是进行计算的工具，其主要应 访问接口。 用已逐渐转变为大量数据的存储与处理。存储技术 2 系统结构设计 在计算机科学中的地位变得越来越重要。集成电路 2.1 总体结构 技术发展使CPU速度有了显著的提高，而磁盘等 I/O NDSS 是构建在局域网环境中的对等结构的分 设备受机械部件速度的限制相对提高不大，这就造 布式存储系统。图 1 给出了NDSS 系统的总体结构。 成单机系统的计算能力与 I/O性能之间的差距越来 在 NDSS 系统中，每个存储节点都是一台可以单独 越大，于是人们提出将 I/O 操作分散到不同计算机 运行的计算机，任意两个存储节点之间的关系都是 中并行处理来提高 I/O 性能。 对等的，在系统中不存在用来进行统一管理的中心 随着计算机网络的发展与网络带宽的不断增 节点。每个存储节点都提供自己的本地磁盘作为整 长，利用网络技术来提高存储系统的容量、可靠性 个磁盘空间的一部分，这些本地磁盘空间被按照某 与可扩展性成为可能。近年来，网络分布式存储已 种数据布局（例如 RAID 0）组织起来。 经成为存储技术发展的新趋势。分布式存储系统可 以将分散在网络中的存储资源组织起来，构成大容 量的虚拟磁盘存储空间。目前，国外在分布式存储 系统方面的研究课题相当多，但是这些研究成果大 多仍处于实验室研究阶段，并没有大规模使用或成 为商用的存储系统。 按照分布式存储系统的实现层次来划分，这些 研究课题主要可以分为 2 个层次：一类实现在文件 系统级；另一类实现在设备驱动级。其中，文件系 图 1 NDSS 系统的总体结构 统级实现是指通过分布式文件系统来实现的分布 NDSS 可以将局域网中不同计算机中的存储空 式存储系统，这类研究工作主要包括 xFS、Coda 与 间统一组织与管理起来，以便为用户提供大容量、 Frangipani 【1】等；设备驱动级实现是指在文件 高性能、高可靠性与可灵活扩展的存储服务。分布 系统下面的设备驱动层实现的分布式存储系统，这 式文件系统为用户提供了数据文件的访问接口，文 类研究工作主要包括 Petal、RAID-x 【2】等。目前， 件系统将对文件的读写操作分解成对多个数据块 在分布式文件系统方面的研究课题要多一些。 的读写操作，并将对实际的物理磁盘的读写操作发 NDSS 是在文件系统层次上设计与实现的分布 送到相应的存储节点中完成。 式存储系统，它基于分布式文件