PC机群的搭建课件.ppt

分布式系统开发 计算机学院计算机科学与技术系 主讲：陈 蕾 E-mail: chenleijx@ 第四章 PC机群的搭建 机群系统概述 什么是机群？ 机群是一组独立的计算机（节点）的集合体，节点间通过高性能的互连网络连接；各节点除了可以作为一个单一的计算资源供交互式用户使用外，还可以协同工作并表现为一个单一的、集中的计算资源供并行计算任务使用。 一种造价低廉、易于构筑、并且具有较好可扩放性的并行机体系结构 发展迅速的原因 作为机群节点的工作站系统的处理性能越来越强大，更快的处理器和更高效的多CPU机器将大量进入市场； 随着局域网上新的网络技术和新的通信协议的引入，机群节点间的通信能获得更高的带宽和较小的延迟； 机群系统比传统的并行计算机更易于融合到已有的网络系统中去； 机群上的开发工具更成熟，而传统的并行计算机上缺乏一个统一的标准； 机群价格便宜并且易于构建； 机群的可扩放性良好，节点的性能也很容易通过增加内存或改善处理器性能获得提高。 重要特征 机群的各节点都是一个完整的系统，节点可以是工作站，也可以是PC机或SMP机器； 互连网络通常使用商品化网络，如以太网、FDDI、光通道等，部分商用机群也采用专用网络互连； 网络接口与节点的I/O总线松耦合相连； 各节点有一个本地磁盘； 各节点有自己的完整的操作系统。 分类 根据不同的标准，可有多种分类方式 针对机群系统的使用目的可将其分为三类： 高性能计算机群（高速的商用互联网络+大量的PC机，节点同构） 负载均衡机群（具有一个中央监控节点，负责控制其余每个工作点的负载监控以及任务指派） 高可用性机群（采用冗余机制来掩盖硬件以及软件的易错性，可提供不间断的服务） 典型机群系统 Berkeley NOW NASA Beowulf COTS（Commodity off the shelf） NEC LAMP SMP－cluster PC机群的搭建 机群系统概述 硬件的选择与安装 软件的选择与安装 机群系统性能评测 硬件的选择与安装 节点构建 处理器、内存、总线、 磁盘与I/O 系统构建 网络适配卡、交换机 机群系统示例 64个节点PC机群 1个服务节点（兼作计算节点）和63个计算节点 机群系统示例 服务节点配置： CPU：Pentium Ⅳ 2.0G（512KB全速二级缓存） 内存：1G（2?512M） 硬盘：80GB IDE 主板：ASUS P4T Socket 423 网卡：3com 905 –TX（两个） 显卡、显示器、键盘、鼠标、光驱、软驱：略 计算节点配置： CPU：Pentium Ⅳ 1.5G（512KB全速二级缓存） 内存：512MB（2?256M） Rambus 硬盘：40GB IDE 主板：ASUS P4T Socket 423 网卡：3com 905 –TX 机群系统示例 交换设备由2个3com 3c16980和1个3com 3c16985的交换机通过一个matrix module堆叠而成，并安装了一个千兆光纤模块，以备服务接点连接内部机群的网卡升级为千兆网卡。 PC机群的搭建 机群系统概述 硬件的选择与安装 软件的选择与安装 机群系统性能评测 软件的选择与安装 OS的选择 SSI的构建 编程环境的选择 OS的选择 Windows UNIX Linux 机群系统示例 Redhat 7.2版本（内核2.4.10） SSI的构建 单一系统映像SSI（Single System Image） 单一系统：尽管系统中有多个处理器，用户仍然把整个机群视为一个单一的系统来使用 单一控制：逻辑上，最终用户或系统用户使用的服务都来自只有唯一接口的同一个地方 对称性：用户可以从任一个节点上获得机群服务，也就是说，对于所有节点和所有用户，除了那些对一般访问权限作保护的服务和功能外，所有机群服务和功能都是对称的 位置透明：用户不用了解真正执行服务的物理设备的位置 SSI提供的三种服务 单一登录（Single Sign On） 用户可以从机群系统的任何一个节点登陆，而且在整个作业执行过程中只需登录一次，不必为将作业指派到机群中的其他节点而重新登陆。 单一文件管理（Single File Hierarchy） 在机群系统中，有一些对整个机群所有节点来说都相同的软件，对这些软件没有必要在每一个节点上重复安装。 单一作业管理系统(Single Job Management System) 用户可以透明地从任一节点提交一项作业，作业可以调度为以批处理、交互或并行的模式运行。 单一登录（Single Sign On） 两种实现方法 网络信息系统NIS（Network Information Sys