并行设计分解.ppt

1.5 提高计算速度的潜力 1.5 提高计算速度的潜力 4、阿姆得尔（Amdahl）定律 假设求解问题规模固定，将计算分为并发部分时 无需开销。 f——不能分解成并行任务的计算部分所占的比例。 ts——串行执行所需时间 n——并行处理机数 tp——并行计算所需时间 1.5 提高计算速度的潜力 即使使用无限多个处理器，最大的加速比仍不超 过1/f。1/f 称为串行瓶颈。 这个定律曾给并行计算机的发展蒙上阴影，人们 一度认为：减少串行瓶颈比制造大规模计算机更 重要。 1.5 提高计算速度的潜力 5、效率(Efficiency) Efficiency 给定了处理器用于计算的时间比例。 当所有处理器在所有时间都用于计算时，取得 100%最大效率，此时，加速比为n； 1.5 提高计算速度的潜力 6、代价（Cost） cost=(执行时间）*（所使用的处理器总数） 顺序计算 cost= ts 并行计算 cost= tp*n , tp = ts / S(n) 1.5 提高计算速度的潜力 7、可扩展性（Scalability) 当效率较高，且效率不随着处理器数目的增加而下降时，称此并行计算机系统具有可扩展性。 Hardware Scalability:硬件可伸缩 Architecturally Scalability:体系结构可伸缩性 Algorithm Scalability:算法可伸缩性 1.5 提高计算速度的潜力 8、Gustafson’s law：Gustafson定律 Gustafson认为：使用并行计算机的目的不仅是为了缩短一个问题的求解时间，更多的情况是为了在相同的时间内通过扩大问题的规模来获得更精确的解答，因此假设并行执行时间固定，即s+p固定。 Ss(n) 称为比例加速比（随问题规模增大而增加）。按照Gustafson的加速比公式并行加速比将会随着并行计算机中处理器数目的增加而线性增大。 1.3.1 Static Network Message-Passing Multicomputer 网络直径 Diameter: the minimum number of links between the two farthest nodes in the network. Note that only the shortest routes are used. Diameter is used to determine the worst case delays and find the communication lower bound of some parallel algorithms. 1.3.1 Static Network Message-Passing Multicomputer 2、Completely Connected Network 每一结点与所有其他结点均有一条链路 有限互连的静态网络： 线/环网络 Line/Ring 网格/圆环形网络 Mesh/Tour 树状网络 Tree Networks 超立方体网络 Hypercube Network 1.3.1 Static Network Message-Passing Multicomputer 3、Ling/Ring 线网：由一行结点组成，每个结点限定只能与其邻接 结点连接。每个结点有2条链路，n 个结点有 n-1条链路 Diameter:n-1. 环网：将线网两端的自由结点连接。 n 个结点有 n条 链路 . Diameter: n/2 1.3.1 Static Network Message-Passing Multicomputer 4、Mesh 二维网格：二维阵列中的每个结点能与其4个最邻近的 结点相连。 Diameter of n ? * n ? Mesh : 2(n ?-1) 三维网格：每个结点在xyz三个维上各与两个结点相连 圆环形网络（tours):将网格中的所有自由端结点与其对立端的结点循环相连。 在n ? * n ? tours 中，总链路数为2n条。 1.3.1 Static Network Message-Passing Multicomputer 二维阵列