高性能计算集群系统WRF模式并行计算效率浅析.pdfVIP

高性能计算集群系统WRF 模式并行计算效率浅析 蔡达伟，华东空管局气象中心，上海，200335 摘 要：目前高性能计算集群已经成为数值预报系统的主流平台，对高性能计算集群的 并行效率进行研究，可以充分利用现有的软硬件资源，提高现有系统的整体效能。本文将利 用WRF 模式对高性能计算集群系统并行效率进行试验，选取不同节点数、CPU 数的组合，分 别测试WRF 个例的运算时间、加速比和并行效率，通过对比不同组合的加速比和并行效率的 变化，分析探讨高性能计算集群系统运行效率与CPU 数、节点数的相互关系。 关键词：高性能计算集群；并行效率； WRF 模式 1 引言 数值预报作为气象预报的重要工具之一，具有计算量大、实时性强的特点，对计算机的 性能提出了非常高的要求。近年来，随着计算机技术、通信技术的不断发展，集群技术、消 息传递标准及相关软件的日益成熟，高性能计算集群已经成为数值预报系统的主流实现方 式。对高性能计算集群的并行效率进行研究，可以充分利用现有的软硬件资源，提高现有系 统的整体效能，同时为新建更高效的高性能计算集群系统提供数据依据。 本文将使用IBM P 系列小型机搭建的高性能计算集群，利用WRF 数值预报模式对高性 能计算集群的计算效率进行研究，通过实验分析探讨WRF 数值预报模式并行运算时CPU 数量 与运算效率的相互关系。 2 高性能计算集群系统的原理及架构 2.1 高性能计算集群系统的原理 [1] 将多台计算机连接起来共同完成特定任务就形成了集群系统 。集群系统根据不同的特 征可以有很多分类方法，但是一般我们把集群系统分为两类： (1) 高可用（High Availability）集群，简称HA 集群。这类集群致力于提供高度可靠 的服务。 (2) 高性能计算（High Perfermance Computing）集群，简称HPC 集群。这类集群致力 于提供单个计算机所不能提供的强大计算能力，本文中涉及的既是这类集群。 高性能计算集群采用将计算任务分配到集群的不同计算节点并行处理来提高计算能力， 因而主要应用于需要大规模科学计算的环境中，如天气数值预报、地理地质勘探、生命科学 研究等。 2.2 高性能计算集群系统的架构 高性能计算集群系统通常由一个管理节点和多个计算节点构成，各节点之间通过两套网 络相互连接，分别为用于节点间通信的局域网（普通的以太网）和并行计算进程间通信的高 速网（Infiniband 等高速网）。 文中所用的集群系统架构如图1所示。 作者简介：蔡达伟，1983，男，工程师 图1 高性能计算集群系统架构示意图 具体配置如下： 管理节点1 台：IBM P720 服务器； 计算节点4 台：IBM P755 服务器，CPU 为4 颗8 核POWER7 处理器，主频3.3GHz，128GB 内存； 高速网络：Infiniband 高速网络； 并行环境：IBM Parallel Environment。 3 高性能计算集群系统WRF 模式并行计算效率测试 本文将使用WRF 数值预报模式进行模拟试验：对选定的模拟数据进行计算，分别记录不 [2] 同节点数、CPU 数组合下模式主程序WRF 程序的运算时间，并计算加速比及并行效率 。 (1) 加速比Sp ，即WRF 模式在单个处理器上运算所用时间T 与多个处理器并行运算所 用时间Tp 之比。 (2) 并行效率Ep ，即加速比Sp 与处理器个数P 之比。 通过对比各种节点数、CPU 数组合下系统加速比和并行效率的变化，分析和探讨高性能 计算集群系统运算效率与节点数、CPU 数的相互关系。 4 测试结果与分析 文中测试数据选取NCEP 资料作为初始场，模拟区域格点数313 * 195，格距36KM，参 数化方案为：New Thompson 微物理方案、Kain—Fritsch 积云对流方案、RRTM 长波辐射方 案、Dudhia 短波辐射方案