dsm系统.ppt

虽然以太网问世至今已经有三十年了，但它并未像这三十年中消逝的其他技术一样淡出人们的视线，而是到现在仍然可行。因为它随着技术的变革也一直在向前发展，以满足不断变化的行业需求。以太网大规模普及始于1983年，这一年IEEE建立了10 Mbps以太网标准。之后，该标准发展到快速以太网(100 Mbps )，千兆以太网( 1000 Mbps )以及今天的万兆以太网，40GE和100GE标准即将推出。事实上，目前关于Tb级以太网(即百万Mbps)的讨论已经开始了，这在几年前是很难想象的。 * * cpu的主频一味提升导致功耗上升；所以现在的处理器不再追求高主频，而是在主频和功耗中间做出一个权衡和取舍。 每瓦性能，注重每消耗一瓦特的功耗，能带来的最大cpu性能。 * 举例：论坛；Rackable Systems * 向numalink spswitch * SMP也可以成为cluster中节点：如曙光5000中的A950; 我们称之为混合平台，既可以单机计算；也可以多机并行计算； * 1.2.2 并行计算机系统架构 对称多处理机系统(SMP) SMP 对称式共享存储:任意处理器可直接访问任意内存地址,且访问延迟、带宽、机率都是等价的; 系统是对称的； 微处理器: 一般少于64个; 处理器不能太多, 总线和交叉开关的一旦作成难于扩展； 例子: IBM R50, SGI Power Challenge, SUN Enterprise, 分布式共享存储系统(DSM) DSM 分布共享存储: 内存模块物理上局部于各个处理器内部,但逻辑上(用户)是共享存储的; 这种结构也称为基于Cache目录的非一致内存访问(CC-NUMA)结构;局部与远程内存访问的延迟和带宽不一致,3-10倍?高性能并行程序设计注意; 与SMP的主要区别：DSM在物理上有分布在各个节点的局部内存从而形成一个共享的存储器； 微处理器: 16-128个; 代表: SGI Origin 2000, Cray T3D; 大规模并行计算机系统(MPP) MPP 物理和逻辑上均是分布内存 能扩展至成百上千个处理器(微处理器或向量处理器) 采用高通信带宽和低延迟的互联网络 (专门设计和定制的) 一种异步的MIMD机器；程序系由多个进程组成，每个都有其私有地址空间，进程间采用传递消息相互作用； 代表:CRAY T3E(2048), ASCI Red(3072), IBM SP2 机群系统(Cluster) Cluster 每个节点都是一个完整的计算机 各个节点通过高性能网络相互连接 网络接口和I/O总线松耦合连接 每个节点有完整的操作系统 曙光2000、 3000、4000, ASCI Blue Mountain 1.1 并行计算机基础知识 1.2 并行计算机系统架构 1.3 机群系统 1.4 高性能计算发展趋势 目录 什么是机群系统 机群系统（Cluster）利用标准网络将一台台普通服务器或者PC机连接起来，为使用者提供更高的计算能力和存储能力并为使用者提供单一系统映象的系统。 单一系统映象使用者在使用机群系统的时候感觉上就象使用一个单独的计算机系统一样。单一系统映象实现方法：硬件层、操作系统层、软件层 机群系统的优势 极高的性价比 大型机的主流 良好的可扩展性 更高的可管理性 更低的使用维护成本 更好的可使用性 更好的系统鲁棒性 更多的应用支持 机群使用越来越广泛 应用领域越来越多 机群系统的应用领域 数学 基因信息 气象预报 生物物理 石油勘探 信息服务 汽车制造 船舶制造 2010高性能计算机架构分布 机群系统的应用分类 高性能计算机群 应用于高性能计算领域； 整合多个计算单元的并行计算性能； 注重整体性能的发挥； 目前成为高性能计算机的主体架构； 高性能计算机群系统架构 节点机－采用曙光天阔系列机架式服务器 I系列和A系统 I系统采用Intel Xeon处理器 A系列采用AMD Opteron处理器 2路、4路、8路、16路产品 1U、2U、5U、12U ... … … 计算节点 IO节点 管理节点 登入节点 ... … … 如何选择节点机？ 网络和存储 网络 计算网 管理网 数据传输网 百兆以太网 千兆以太网 Myrinet Infiniband 存储 存储产品 存储结构 文件系统 SCSI SATA FC SAS DAS NAS SAN IPSAN NFS DCFS2 Lustre 如何选择？ 高性能机群层次架构 应用层 机群操作系统层（DCOS） 系统软件层（OS, 编译器） 硬件层（节点, 网络等） 高性能机群的硬件构成 机柜（含供电电源）； 节点机（计算节点，登陆节点， I/O节点，监控节点）； 互连网络，每种网络连接机群的全部