集群技术概述.docVIP

集群技术概述 第一台计算机问世已经半个世纪了，在这期间计算机技术经历了五次更新换代。更新换代的标志主要有两个：一个是计算机的器件，另一个是系统体系结构。从第一代到第五代计算机，器件发生了根本的变化：从电子管、晶体管发展到集成电路，而集成电路又经小规模、中规模、大规模、非常大规模等阶段发展到超大规模阶段。系统体系结构的不断改进，许多重要的概念的不断提出并且得到实现，推动计算机技术向更高的层次发展。从早期的变址寄存器、通用寄存器、程序中断和I/O通道等概念，到虚拟存储器、Cache存储器、微程序设计、基于总线的多CPU系统、向量处理机等概念，发展到64位RISC及Itanium处理器、基于MPP、NUMA、集群等体系结构的可伸缩并行处理系统，计算机系统技术也取得了突飞猛进的发展。 将多台同构或异构的计算机连接起来协同完成特定的任务就构成了集群系统。早在二十世纪七八十年代，Digital equipment公司和Tandem计算机公司就开始了集群系统的研究与开发工作。自80年代初以来，各种形式的集群技术纷纷涌现，这些技术均源于Digital的VAX平台之上。 1 集群 1.1 什么是集群 简单的说，集群（Cluster）就是一组计算机，它们作为一个整体向用户提供一组网络资源。这些单个的计算机系统就是集群的节点（Node）。一个理想的集群是，用户从来不会意识到集群系统底层的节点，在他们看来，集群是一个系统，而非多个计算机。并且集群系统的管理员可以随意增加和删改集群系统的节点。 1.2 为什么需要集群 集群并不是一个全新的概念，其实早在七十年代计算机厂商和研究机构就开始了对集群系统的研究和开发。由于主要用于科学工程计算，所以这些系统并不为大家所熟知。直到基于商用系统的集群出现，集群的概念才得以广为传播。 对集群的研究起源于集群系统的良好的性能可扩展性(Scalability)。提高CPU主频和总线带宽是最初提供计算机性能的主要手段，但是这一手段对系统性能的提供是有限的。接着人们通过增加CPU个数和内存容量来提高性能，于是出现了向量机，对称多处理机(SMP)等。但是当CPU的个数超过某一阈值，象SMP这些多处理机系统的可扩展性就变得极差。主要瓶颈在于CPU访问内存的带宽并不能随着CPU个数的增加而有效增长。与SMP相反，集群系统的性能随着CPU个数的增加几乎是线性变化的。图1显示了这中情况。 集群系统的优点并不仅在于此。下面列举了集群系统的主要优点： 1、高可扩展性：如上所述。 2、高可用性：集群中的一个节点失效，它的任务可以传递给其他节点。可以有效防止单点失效。 3、高性能：负载平衡集群允许系统同时接入更多的用户。 4、高性价比：可以采用廉价的符合工业标准的硬件构造高性能的系统。 1.2.1 集群系统的分类 虽然根据集群系统的不同特征可以有多种分类方法，但是一般我们把集群系统分为两类： 高可用(High Availability)集群，简称HA集群。这类集群致力于提供高度可靠的服务。 高性能计算(High Performance Computing)集群，简称HPC集群。这类集群致力于提供单个计算机所不能提供的强大的计算能力。 2 高可用集群 2.1 什么是高可用性 计算机系统的可用性(Availability)是通过系统的可靠性(Reliability)和可维护性(Maintainability)来度量的。工程上通常用平均无故障时间(MTTF)来度量系统的可靠性，用平均维修时间(MTTR)来度量系统的可维护性。于是可用性被定义为： MTTF/(MTTF+MTTR)*100% 业界根据可用性把计算机系统分为如下几类： 可用比例 (Percent Availability) 年停机时间 (downtime/year) 可用性分类 99.5% 3.7天 常规系统(Conventional) 99.9% 8.8小时 可用系统(Available) 99.99% 52.6分钟 高可用系统(Highly Available) 99.999% 5.3分钟 Fault Resilient 99.9999% 32秒 Fault Tolerant 对于关键业务，停机通常是灾难性的。因为停机带来的损失也是巨大的。下面的统计数字列举了不同类型企业应用系统停机所带来的损失。 应用系统 每分钟损失(美元) 呼叫中心(Call Center) 27000 企业资源计划(ERP)系统 13000 供应链管理(SCM)系统 11000 电子商务(eCommerce)系统 10000 客户服务(Customer Service Center) 系统 27000 随着企业越来越依赖于信息技术，由于系统