云计算中的并行计算技术分析.pdfVIP

云计算专栏 云计算中的并行计算技术分析 郑文武 ，李先绪 ，黄执勤 (中国电信股份有限公司广东研究院 广州 510630) 计算技术就是对资源进行聚合的技术。事实上，分布式并 1 引言 行计算才更加体现出云计算的本质。云计算的名称和分布 云计算是一个含义丰富的概念，包括了服务、市场、技 式并行计算、网格计算是一脉相承的。不过，分布式并行计 术等诸多方面。通常提到的IaaS、PaaS和SaaS，严格地说 算应该只是并行计算的一种，从下文的分析可以看出．对 是基于服务的术语，并不是对技术的描述。从技术上看，云 于云计算除了分布式并行计算这个主要的并行模式外。还 计算是对主机、存储、网络资源分配、使用、管理的技术。其 有其他的并行模式。本文不仅分析分布式并行计算，还分 核心是对主机资源分配、使用、管理的技术。主机资源也可 析了非分布式的并行计算。 称为计算资源。云计算技术包括两个似乎对立的技术，这 2 并行计算的历史 两个技术都是用于对资源进行分配、使用和管理。 一 个技术是对资源进行分割，将资源的分配、使用的 并行计算出现在20世纪60年代初期，这个时期晶体 粒度变细，主机的虚拟化就是这样的技术。通过引入虚拟 管以及磁芯存储器开始出现，处理单元变得越来越小。存 主机，将物理主机的能力进行分割，使主机计算能力的分 储器也更加小巧和廉价。这些技术的发展结果导致并行计 配、使用不是基于单台物理主机。而是基于细分的虚拟主 算机的出现．这一时期的并行计算机大多是规模不大的共 机。简单地说，虚拟化技术就是对资源进行拆分的技术。 享存储多处理器系统，即所谓大型主机。IBM360是这一 另一个技术是利用多个物理主机的能力完成一个任 时期的典型代表。 务。分布式并行计算就是这样的技术。分布式并行计算将 长久以来，并行计算在高性能计算领域发展得如火如 任务分解为多个子任务分派给主机集群中的各个主机，子 荼，并行计算的体系结构也在不断地变化。并行计算所依 任务在多个主机上协调并行运行。简单地说，分布式并行 赖的平台称为并行机，并行机由多个节点组成，任务被分 云计鬻：专槎 解到各个节点，在各个节点并行运行。早期的并行节点，并 和虚拟化成熟的产品不同，并行计算没有成熟的产 不是互相完全独立的主机。更像 1台主机的各个模块。到 品，只有相对成熟的工具。并行计算的实现．依赖于开发者 了2O世纪90年代，随着网络设备的发展以及MPI／PVM等 和用户对业务的熟悉，对并行工具正确、熟练的使用。 并行编程标准的发布。集群架构的并行计算机开始出现。此 并行应用软件从需求分析到设计再到部署，可以分为 时的并行计算硬件平台的节点就是彼此独立的主机了。 3个步骤 现代的并行机体系结构有对称多处理共享存储并行 (1)在需求分析阶段，根据业务特点，将任务尽可能地 机(symmetricmultiprocesser，SMP)、分布共享存储(distributed 分为可以并行执行的多个任务。这是实现并行计算最基础 sharedmemory，DSM)并行机 、大规模并行机 (massively 的、往往也是最有效的阶段。 praallelprocessor，MPP)、并行向量多处理机 (praallelvector (2)在设计、编码阶段，采用并行工具进行程序设计。 processor，PVP)。所有这些体系结构的并行机都是高高在 这个阶段所应用的并行技术是最核心的并行技术，难度最 上位于 “云”端的。但和云