分布式并行文件系统DPFS的SSI技术.pdfVIP

分布式并行文件系统DPFS的SSI技术 式并行文件系统、分布式并行数据库。国外从80年代就开始对分布式和并行操 for Clusters IBM的SP2、SGI的Origin2000、DEC的Digital Moon 的Full (UC 并行系统研制计划或成果。国内也对分布式和并行操作系统作了多年的研究，主 Virtual Server)、武汉大学w 要有：章文嵩博士发起的机群项目一--LVS(Linux D P sH u u P一8 0分布式并行处理系统、清华大学计算机科学与技术系T NI X分布式文件系统、国家智能计算机研究开发中心研制的曙光2000、联想 Cluster Server和哈尔滨工业 NSl0000高性能集群服务器、朗新公司的LongShine 大学并行分布处理文件系统PDPOS等。但是非常遗憾，这些系统都不能彻底解 决系统瓶颈和系统故障重构恢复问题。 服务器 图1～1一个信息系统简单的简单框架 我们可以把一个信息系统简单地描绘成如图1～l所示，图中交换机的总体 交换速度已达Tb／s，现有高档个人计算机的处理速度和存储容量已足以满足单个 用户的需求。然而，现有市场上的单机服务器、双机热备份或镜像服务器却成为 制约其发展的瓶颈。主要原因在于其有限的可靠性、处理能力和存储容量等。采 用分布式服务器可使负载均衡，但如偶遇大型任务则无能为力，为此引入并行处 理机制，将分布式动态任务调度机制和并行处理机制融于一体形成分布式并行服 R．Putter J K—EA P’Roos P,Guerraoui D．WolfftLohrBarak，0Laadall等人，但他们 只局限于服务器内部的研究，而没有很好地解决用户和服务器之间的接口问题。 请求和结果均从其中的一个计算机进出，这个计算机就成为了其系统的瓶颈，影 响了系统的可靠性(或可用性)、吞吐力、I／O响应速度等。在分布式并行服务器 中，客户端和服务器端有相应的分布式并行i／O接口，其功能是使客户端请求按 分布式井行文卅：系统DPFS的SSI技术 当时服务器中可用节点机情况基本均衡而又随机她发往服务器中的各相应节点 机，这一过程对用户是透明的。在完成每一个用户请求的这一步之后，若服务器 中各节点机之间的负载之差超过一定限值，则在服务器内进行智能化动念负载再 调度。基于这种调度技术的分布式并行服务器消除了任何瓶颈，从根本上提高了 系统的可用性，吞吐力和I／O响应速度均因此而提高。因为服务器中各节点机均 接入交换机，而交换机的总交换速度已达Tbls，而且还在不断提高，所以基于分 布式并行I／O接口和有效的调度算法，服务器的处理能力和存储容量可根据需求 伸缩节点机数而得到增减。 1．3关键问题 分布式并行文件系统ssl主要需求是： f1)高可用性 服务器系统为任一客户(机)提供服务。当系统中有部件发生故障，系统可 以按照一定的故障隔离算法和机制隔离故障部件，将系统中的其余部分重新组成 一个有机的整体。原来因故障而中断的服务将从断点处继续对外提供服务，对原 来没有中断的服务没有任何影响；DPFS具有RAS特性(可靠性、可用性和可维 护性一般统称为RAS特性)，可支持