C01-并行计算基础.pdf

并行计算基础 谭光明 研究员、博士生导师 tgm@ncic.ac.cn 中国科学院计算技术研究所 国家智能计算机研究开发中心 计算机体系结构国家重点实验室 什么是并行计算 串行执行 并行执行 为什么并行计算 节省时间（金钱） 解决大规模问题 提供高的并发度 串行技术发展受限 谁在玩并行计算 •  拥有智能手机的人 ！ •  超级计算机 –  IBM,CRAY,INTEL,HP,曙光 超级计算机应用领域 曙光高性能计算机 曙光1号 曙光1000 曙光2000 曙光3000 全对称共享存储 当时中国最快的计算机 中国首个机群系统 工业标准机群 多处理机系统 峰值25.6亿次/秒 峰值1117亿次/秒 峰值4032亿次/秒 曙光4000 曙 5000 曙光6000 （星云） 中国首个进入TOP500 当时中国最快的计算机、 中国首个实测性能超过千万亿次 前十名的高性能计算机、 中国首个刀片式机群、 的高性能计算机、 峰值11万亿次/秒 峰值230万亿次/秒 世界TOP500第二名、 5 峰值3千万亿次/秒 发展趋势 你准备好了吗 ！ 基本概念 S I S D S I M D Single Instruction, Single Data Single Instruction, Multiple Data M I S D M I M D Multiple Instruction, Single Data Multiple Instruction, Multiple Data 冯 偌依曼体系结构 SISD SIMD MISD MIMD 五种结构特性一览表 属性 PVP SMP MPP DSM COW 结构类型 MIMD MIMD MIMD MIMD MIMD 处理器类型 专用定制 商用 商用 商用 商用 互连网络 定制交叉开关 总线、交叉开 定制网络 定制网络 商用网络（以 关