高性能并行算平台及并行计算环境概述.ppt

高性能并行计算平台及并行计算环境概述 中国水利水电科学研究院 信息网络中心 2005年8月11日 内 容 提 要 1、前言 2、高性能并行计算平台建设 3、水利水电高性能计算实践 4、结语 1、前言 什么是高性能并行计算？ 科学家和工程师可以用它来解决一些程序规模庞大、运算时间长以及数据量大的科研课题。 并行计算是提高服务器计算速度和处理能力的一种有效手段。 计算机按照编好的程序对计算问题进行分解，并把分解的任务块通过一定的方式交给不同的处理器去求解。 国际发展动态 2005年6月22日公布的全球高性能计算机top500，第一名是IBM的Blue Gene/L，Linpack测试值为每秒136.8万亿次，第二名是IBM的Blue Gene/W，Linpack测试值为每秒91万亿次。 日本第一的高性能计算机，Earth Simulator（地球模拟器），Linpack测试值为35.6万亿次。 国内发展动态 中国的第一名，中国气象局的高性能计算机，Linpack值为每秒10.3万亿次。 曙光系列、神威系列、银河系列、深腾系列 中科院计算所、曙光公司和上海超级计算中心三方共同研制的曙光4000A，Linpack测试值为每秒8.061万亿次。 联想公司为中科院网络信息中心生产的深腾6800，共有1060颗1.3Ghz的安腾2处理器，Linpack测试值为每秒4.183万亿次。 院内需求分析 随着工程规模的逐渐扩大、复杂问题求解分析的日益深入，其科学计算的“瓶颈”日趋严重，即使对模型和算法进行简化，一次计算仍需要几个小时、几天甚至数十天的时间，这一现状严重制约了我院水利水电学科的发展，许多工程师、教授提出的理论和设想都因为计算能力受到限制而无法实施。 课题1：小湾坝踵应力诱导缝研究 小湾拱坝坝底缝计算采用网格有20万个单元，总共24万多个节点。 单机上运行模拟计算程序时，一个计算步需要将近4~5个小时，一个工况一般有30~40个计算步，总共有几十种工况。 课题2：混凝土三维细观力学模型的研究 模型1：湿筛试件静动态弯拉强度细观力学分析 研究中对试件进行划分，用4面体单元将细网格6面体单元过渡到两边粗网格6面体单元，共有24257节点，29952个单元，其中骨料2160个单元，固化水泥砂浆体3805单元，粘结界面14515单元以及宏观均匀混凝土9472个单元。 以上三维计算是在内存1G，CPU为2.8G的PC机上进行的。静力计算耗时163小时39分，约7天时间；动力计算耗时196小时25分钟，约8天时间。 模型2：全级配试件静动态弯拉强度三维细观力学分析 剖分后的单元有骨料单元、融入小骨料后的固化水泥砂浆单元和两者之间的界面单元，共有24257个节点，113920个单元。 计算时间：在以上配置相同的PC机上，三维静力计算耗时209小时50分钟，约9天时间；动力计算耗时291小时57分钟，约12天时间。 问 题 要实现三维细观力学数值计算，计算速度这一难题必须克服，通常，针对一个模型研究人员需要反复调整参数进行数值计算，一个算例耗时数天甚至数周简直无法忍受。 上述种种计算和数据的处理对计算环境提出了新的要求，如果以传统的个人PC机作为计算平台，计算的时间和效率远远满足不了科研的需求，甚至会由于内存、CPU等硬件的限制而无法进行计算。因此我院急需建设一个高性能并行计算平台，更好的为科研项目服务。 二、高性能并行计算平台建设 硬件平台建设 初步构想 采用Sun公司提供的Sun Fire Supercluster解决方案。 2~4台高性能的Sun Fire 6800服务器作为集群节点。 每台服务器达到满配置，即24个1.2Ghz UltraSPARCIII CPU，192GB内存。 节点之间采用Sun Fire Link Interconnect 技术通过光纤互联。 Sun Fire 6800 技术指标 硬件完全冗余，可以从任何硬件故障中恢复。 最多24个CPU，最大192GB内存，32PCI或者16cPCI插槽。 每台Sun Fire 6800机器最多分为4个域，每个域相当于一台独立的服务器。 具有很好的线性扩充能力，24个CPU运行时的Linpack值是1个CPU运行时的23.3倍。 Sun Fire Link Interconnect Sun Fire Link 为一套高带宽、低延迟的互联系统，可以扩展Sun Fire6800 系统的可用性。 一个Sun Fire Link系统最多可以由8个Sun Fire 6800服务器节点组成，每个节点由Sun Fire Link光纤网络连接在一起， 一整套软件支持。Sun Management Center可以为Sun Fire Link 网络资源的配置