Abaqus小型并行计算集群平台的构建方法.PDF

Abaqus 小型并行计算集群平台的构建方法 阚圣哲，陈国兴 (南京工业大学岩土工程研究所，江苏 南京 210009) 摘 要：介绍了一个基于 EM64T硬件构架、双路 Intel Xeon 处理器、Linux操作系统和 64位 Abaqus软件的 32CPU 并行计算集群 平台的构建方法。以岩土工程动力分析模型为例，测试了集群各构件对集群整体性能的影响。 关键词：并行计算；集群构建；动力分析 0 引言 0.1 当代并行计算系统的构架 目前常用的并行计算机是对称多处理机(smp)和集群系统(cluster) 。常见的搭载单颗多核处理器的桌面个人计 算机就属于 smp ；cluster 是一种通过局域网络将多台计算机连接起来协同工作的并行计算系统，可以用普通个人 电脑(PC) 、工作站(workstation)或者 smp 来组建 cluster 。smp 与 cluster 最大的区别在于：smp 中内存地址具有单 地址空间，各处理器可以平等地调用共享内存、I/O 设备和操作系统等各种资源；cluster 中内存实际分布在各个 节点上，处理器读取本地节点的内存时数据通过总线传输，延时低，处理器读取其它节点的内存时数据通过局域 网络传输，延时高。 [1] smp 支持的最大处理器数一般不超过 10 个 ，因此 smp 只能作为小型的并行计算系统。cluster 利用局域网络进行处理器间通信的方法虽然能提高并联的处理器数，但也因局域网络的带宽和延时限制了集群的 性能，目前集群技术适合搭建 100 颗处理器以下级别的并行计算系统 [1] 。 目前 smp 结构的服务器一般是搭载多核处理器的双路或四路服务器，但真正的八路或十六路服务器产品非常 少见。一些 smp 结构的小型机可以并联更多的处理器，但是其价格昂贵，后期维护复杂。cluster 可以使用商业化 大生产的多路服务器来构建。双路或四路服务器是很好的选择，该类服务器价格低廉、性能优异，用来构建 cluster 可以获得很好的性能/价格比。所以在科学计算领域，cluster 非常流行，在 TOP500 中很大一部分并行计算系统都 是 cluster 。 此外还有一些阵列处理机、向量处理机，可能不兼容常用的 x86 程序，所以应用上具有局限性。目前提出的 GPU 加速技术，需要开发新的程序来使用该技术，用在运行商业程序的集群上也不适用。 1 基于 Abaqus 软件的数值模拟并行计算集群平台的建立 1.1 集群系统的结构 集群中的每台计算机设备都称为集群的节点(node) ，有时各节点在功能上具有分工，那么各节点可以依照功 能划分为管理节点、计算节点、I/O 节点等；有时一个节点也可能实现多个功能，例如小型集群可以将 I/O 、存储、 管理等功能都放在一个节点上，这个节点就可以称为主节点。与 smp 相比，集群更具有可扩放性：增加集群中处 理器数量只需要增加集群的节点。 本文中构建的集群采用机架式设备组建，按功能分为四类节点：计算节点、管理节点、存储节点和网络节点。 其具体的硬件配置见表 1。其拓扑结构图见图 1。图 1 显示了该集群系统及其主要附属设备。除集群各类节点外， 电源系统、监视系统和冷却系统也是维持集群正常工作的重要附属设备。 表 1 并行计算数值模拟集群平台的节点硬件参数 4 台 DELL PE1950 或 DELL PE2950 双路四核机架式服务器 处理器 每台搭载 2 颗 3GHz Intel Xeon Pro E5450 或 X5365 处理器 计算节点 内存 每台 8GB DDR Ⅱ 667MHz 全缓冲 ECC 效验内存 硬盘 每台 2 块 SAS 15000 转 146GB 硬盘组建 RIAD 0 网卡