并行体系结构的发展之路.ppt

机群系统研究 目前国内外许多科研机构都在对机群系统下的通信技术进行深入的研究，下表中列举了在机群系统中实现的几种经典的通信子系统。 第三十页，共四十三页。 第三十一页，共四十三页。 机群系统研究 目前，机群系统大多数采用商用高性能工作站或高档PC，结点的运算速度问题不是很突出，因而主要的研究方面是在提高系统的并行效率，使系统的使用更为方便上，包括建立高效的通信系统，有效地管理全局资源和提供友好的并行应用程序开发环境等。 机群系统之所以能够从技术可能发展到实际应用主要是它与传统的并行处理系统相比有以下几个明显的特点： 第三十二页，共四十三页。 机群系统研究 系统开发周期短。 用户投资风险小。 系统价格低。 节约系统资源。 系统扩展性好 用户编程方便 第三十三页，共四十三页。 机群系统研究 跟传统的RISC小型机或者由普通的PC服务器群比较，机群的优势主要体现在以下几个方面： 第三十四页，共四十三页。 第三十五页，共四十三页。 机群系统整体框架 第三十六页，共四十三页。 ???曙光机群系统结构 第三十七页，共四十三页。 曙光4000L面向网格和HPC机群系统方案 第三十八页，共四十三页。 并行体系结构的发展之路 第一页，共四十三页。 目录 引言 并行计算机发展的推动力 并行体系结构的分类 并行体系结构的发展过程 并行体系结构的展望 第二页，共四十三页。 引言 并行计算机的定义 体系结构巨大变化 CPU性能发展 软硬件技术进步 第三页，共四十三页。 并行计算机发展的推动力 科学与工程计算领域对并行计算能力的要求总是永无止境的。 计算机技术、网络技术的迅速发展及其对经济与生活影响的日益深入 并行计算机体系结构的发展和处理器、存储器以及网络互连技术的发展密不可分 第四页，共四十三页。 计算机并行体系结构的分类 Flynn分类法 其弱点 第五页，共四十三页。 计算机体系结构的分类 Flynn分类法的扩展: 根据内存的物理分布、逻辑映射、读取方式 可以将MIMD类并行计算机系统进一步细分为共享内存，虚拟共享内存，和分布式内存三大类 这三类并行系统所使用的编程模式有共享内存和消息传递，以及两种模式同时使用的混合模式 第六页，共四十三页。 共享内存(UMA/SMP) 所有共享内存系统的共同特点是：计算机系统具有可以被所有处理器直接存取的共享内存空间。 由一个操作系统控制，并且整个系统仅有一个地址空间；各个处理器在内存的存取上是平等的，处理器存取每个内存单元的代价是一致的 第七页，共四十三页。 虚拟/分布式共享内存 内存不再是集中位于系统中的某一区域，而是物理分布在整个系统中； 这种系统中连接处理器与内存的网络不再是简单的、单一的总线/交叉开关/其他网络结构，而是一种分级混合式网络结构。 在用户看来，这种系统具有共享内存系统的所有特征。 第八页，共四十三页。 分布式内存 没有一个共享的、囊括系统所有物理内存的空间。 分布式内存系统所使用的编程模式是消息传递，系统的任何一个结点都具有独立的操作系统，能独立运行 这类系统又被一些人称为多处理机系统。 可以进一步分为三个子类： 第九页，共四十三页。 分布式内存系统分类 大规模并行处理（MPP，Massively Parallel Processing） 指那些使用比较专有的、非大规模商品化的硬件和软件，紧耦合的分布式内存计算机系统； 第十页，共四十三页。 分布式内存系统分类 Beowulf集群 它的每个处理结点都使用量产的商用计算机系统，互连网络也使用量产的商用LAN/ATM网络。 Beowulf集群也被称为工作站集群（COW，Cluster of Workstations），或者工作站网络。 第十一页，共四十三页。 分布式内存系统分类 SMP集群 它的每个结点都是一个SMP系统，互连网络也使用类似Myrinet的高速网络。 SMP集群仍然可以适用以MPI（Message Passing Interface）为代表的消息传递编程模式。 另外，ＳＭＰ集群较之Beowulf集群，可以支持以MPI + OpenMP为代表的混合编程模式。 第十二页，共四十三页。 并行体系结构的发展过程 60年代初期 主要是共享存储多处理器系统 当时的IBM System 360是这一时期的典型代表。（下图 IBM System 360 ） 第十三页，共四十三页。 IBM System 360 第十四页，共四十三页。 并行体系结构的发展过程 伊利诺依大学和Burroughs公司此时开始了Illiac IV计划。 当一台规模大大缩小了的16 CPU系统终于在1975年出现时，整个计算机界已经发生了巨