用 xCAT 与 TORQUE 进行动态服务器供应.docVIP

我们所构建的这个集群，其中的节点由 xCAT 供应，并且其上的批量作业由 TORQUE 管理和执行。在 xCAT 和 TORQUE 之上，我们构建了一个供应代理来使此集群成为自适应 的，即集群的计算节点按作业要求的执行环境动态供应。 自适应集群的架构 我们所构建的这个动态集群的架构如 HYPERLINK /developerworks/cn/opensource/os-xcat-torque/ \l fig1 图 1 所示，其中的 xCAT 集群包括了一个管理节点 和几个计算节点。计算节点是由运行在管理节点上的 xCAT 服务器供应的。管理节点还运行了 TORQUE 服务器和调度器守护程序，以及用 xCAT 管理计算节点所需的几个服务，包括 DNS、DHCP、TFTP 和 NFS。 若计算节点运行 TORQUE 服务器分派的作业，运行在每个计算节点上的 TORQUE 作业执行守护程序就会启动。供应代理检查工作负载和节点配置并决定为了提供作业所需的执行环境需要供应哪些节点。 图 1. 自适应集群 对于一个小的集群，单一一个管理节点就能提供供应所有的计算节点所需的带宽。对于一个较大的集群，则需要一个分层的方式，且管理节点要连接到 两个或多个服务节点，计算节点要从这些服务节点得到供应。 对于本文，我们使用的是一个小的集群，该集群有一个管理节点 — xcat1 — 和两个计算节点 — xcat2 和xcat3 — 二者通过 Ethernet 交换机 xcat-switch 连接到 xcat1，如 HYPERLINK /developerworks/cn/opensource/os-xcat-torque/ \l fig2 图 2 所示。所使用的服务器均具有一个双处理器 Intel? Xeon? x86_64 架构、2 GB 内存、73 GB 磁盘容量和支持 Preboot eXecution Environment (PXE) 引导的 Ethernet 接口。管理节点运行的是 CentOS 版本 5.4。 图 2. 集群组件和联网 对计算节点的供应采用的是无磁盘 的方法，计算节点从管理节点引导。具体地说，是使用了基于 PXE 的网络引导。 配置管理节点 在安装 xCAT 之前，先配置管理节点，以便 xCAT 能被正确安装并能获得有关此集群的正确信息。本节给出了在安装 xCAT 之前，在管理节点上应该执行的配置操作。 设置联网和主机定义 管理节点 xcat1 连接到公共网络 （称为 extnet）以及集群网络 （称为 cluster）。我们为两种接口均使用了静态 IP 地址：公共网络接口 eth0 的 IP 地址为 01；集群网络接口 eth1 的 IP 地址为 。清单 1 显示了所配置的网络接口，其中的 virbr0 对于虚拟化很有用，但对于本文中所讨论的设置却用处不大。 清单 1. 网络接口 xcat1 # ifconfig -a | egrep -A1 ^[a-z] | grep -v \--eth0 Link encap:Ethernet HWaddr 00:11:43:DF:0E:A8 inet addr:01 Bcast:55 Mask:eth1 Link encap:Ethernet HWaddr 00:11:43:DF:0E:A9 inet addr: Bcast:55 Mask:lo Link encap:Local Loopback inet addr: Mask:sit0 Link encap:IPv6-in-IPv4 NOARP MTU:1480 Metric:1virbr0 Link encap:Ethernet HWaddr 00:00:00:00:00:00 inet addr: Bcast:55 Mask: ? HYPERLINK /developerworks/cn/opensource/os-xcat-torque/ \l list2 清 单 2 中显示了定义主机名的文件 /etc/sysconfig/network 以及定义本地主机查找表的文件 /etc/hosts，其中这两个计算节点的 Intelligent Platform Management Interfaces (IPMI) 分别为 xcat2 和 xcat3。IPMI 被 xCAT 用来进行功率循环和引导计算节点。使用 hostname 命令可以查看本地主机的缩短名和全名，如如下清单所示。 清单 2.