基于Linux集群技术开发与应用.docVIP

基于Linux集群技术开发与应用 　　摘要本文以南阳理工学院校园网的建设为例，提出了一个利用Linux的集群技术针对存储系统这一多媒体服务器的瓶颈问题，打破在互联网中以单机为主的传统服务器方式，研制以Linux核心层集群技术和安全技术为基石，构建一个在Internet服务器中将负载分给多个服务器分担，同时对方案的软硬件基本配置与实现过程进行详细描述。 　　关键词 Linux MPICH 负载均衡 集群技术 　　 　　1 需求分析 　　 　　随着Internet 的飞速发展，对我们生活产生了深入的影响，越来越多的用户在网上进行多媒体、娱乐、休闲、与 　　人沟通、获取信息等活动。互联网的用户数量和网络流量正以几何级数增长，这对网络服务的可伸缩性提出了很高的要求。比如热门的Web站点会因为被访问次数急剧增长和不能及时处理用户的要求，而导致网络拥塞或超时现象。另外，随着电子商务等关键性应用在网上运行，任何意外的服务中断都将造成不可估量的损失，服务的高可用性也越来越重要。 　　与之相应地，对用硬件和软件方法实现高可伸缩、高可用网络服务的要求也在不断增长。单服务器显然不能适应不断增长的负载。这种服务器升级方法有下列不足：一是升级过程烦琐，机器切换会使服务器暂时中断，并造成原有计算机资源的浪费；二是越高端的服务器，所花费的代价越大；三是一旦该服务器或应用软件失效，会导致整个服务器的中断。 　　 　　2 设计思路 　　 　　为了适应Internet网络的高速发展，提出了一个利用Linux的集群技术针对存储系统这一服务器的瓶颈问题，打破在互联网中以单机为主的传统服务器方式，研制以Linux核心层集群技术和安全技术为基石，构建一个在Internet服务器中将负载分给多个服务器分担，以解决Internet服务器面临的大量并发访问造成的CPU或I/O的高负载问题，同时对方案的软硬件基本配置与实现过程进行详细描述。所以我们提出在Red Hat Linux 7.0下通过高性能网络或局域网互联的服务器集群来实现高可伸缩性、高可用网络服务的有效解决方案。 　　 　　3 解决方案 　　 　　在系统中使用多台计算机进行连接，其中一台与网络上的其他设备连接的计算机要装上两块网卡，在其他的计算机装上一块快速以太网卡。使用RJ45超五类双绞线将计算机连接到交换机上，将安装有两个网卡的计算机中另外一块网卡也用RJ45超五类双绞线连接到局域网上。使用Red Hat Linux 7.0安装盘在每一台计算机上安装Linux操作系统，并要在Linux操作系统中安装C编译器和C的LIB库。在配置TCP/IP时，给计算机配置IP地址使集群服务器的计算机能进行相互通讯，如图1所示。 　　下面在进行配置服务器时推荐使用MPICH软件去执行分布式的并行处理应用。mpich是由Argonne National Laboratory和Mississippi State University合作开发的，该软件包请从/mpi/index.html下载Unix (all flavors)版本，软件共12.3MB，解压缩文件：tar -zxvf mpich.tar.gz。将自动产生mpich-1.2.4目录，进入该目录后后，执行[root@ns1 mpich-1.2.4]#. /configure-prefix=/usr/local/mpich-1.2.4/（如图2所示），接着执行：make；make install编译并完成安装。 　　 　　4 实施费用 　　 　　这个集群方案中总的费用分为硬件与软件费用，具体如下： 　　硬件费用：集群计算机采用Pentium Ⅳ处理器、256MB/DDR内存、30GB的硬盘等大约5000元一台，需要多少计算机就可以乘以5000元，还需一个快速以太网交换机约2000元。 　　软件费用：Linux安装光盘和MPICH安装软件免费。 　　这样一个集群系统可以用于一些大量的科学计算、信息处理，而且其性价非常好。目前，也有高性能服务器，但阻碍高性能计算机推广和使用的最根本问题就是价格非常昂贵，一般的部门或单位根本不能承受。因此如何充分利用现有资源，发挥已有计算机的最大效能，成为推广、扩大高性能计算机应用领域的首要问题，解决计算机网络的访问速度及价格问题。 　　 　　5 系统功能 　　 　　5.1负载均衡 　　多台服务器为对称方式，每台服务器都具备等价的地位，都可以单独对外提供服务而无须其他服务器的辅助。然后通过某种集群技术，将外部发送来的请求均匀分配到对称结构中的某一台服务器上，而接收到请求的服务器都独立回应客户机的请求。 　　将大量用户的并发访问分别送到多个服务器上并行处理，缩短用户等待响应的时间，系统的处理