分布式计算、并行计算及集群、网格、云计算的区别.pdf

分布式计算、并行计算及集群、

网格、云计算的区别

并行计算：并行计算是相对于串行计算来说的。可分为时间上的并行和空间上的

并行。时间上的并行就是指流水线技术，而空间上的并行则是指用多个处理器并发

的执行计算。并行计算的目的就是提供单处理器无法提供的性能（处理器能力或存

储器），使用多处理器求解单个问题。

分布式计算：分布式计算研究如何把一个需要非常巨大的计算能力才能解决的问

题分成许多小的部分，然后把这些部分分配给许多计算机进行处理，最后把这些计

算结果综合起来得到最终的结果。最近的分布式计算项目已经被用于使用世界各地

成千上万位志愿者的计算机的闲置计算能力，通过因特网，可以分析来自外太空的

电讯号，寻找隐蔽的黑洞，并探索可能存在的外星智慧生命等。

并行计算与分布式计算的区别：（1）简单的理解，并行计算借助并行算法和并

行编程语言能够实现进程级并行（如MPI）和线程级并行（如openMP）。而分布

式计算只是将任务分成小块到各个计算机分别计算各自执行。（2）粒度方面，并

行计算中，处理器间的交互一般很频繁，往往具有细粒度和低开销的特征，并且被

认为是可靠的。而在分布式计算中，处理器间的交互不频繁，交互特征是粗粒度，

并且被认为是不可靠的。并行计算注重短的执行时间，分布式计算则注重长的正常

运行时间。（3）联系，并行计算和分布式计算两者是密切相关的。某些特征与程

度（处理器间交互频率）有关，而我们还未对这种交叉点（crossoverpoint）进

行解释。另一些特征则与侧重点有关（速度与可靠性），而且我们知道这两个特性

对并行和分布两类系统都很重要。（4）总之，这两种不同类型的计算在一个多维

空间中代表不同但又相邻的点。

集群计算：计算机集群使将一组松散集成的计算机软件和/或硬件连接起来高度紧

密地协作完成计算工作。在某种意义上，他们可以被看作是一台计算机。集群系统

中的单个计算机通常称为节点，通常通过局域网连接，但也有其它的可能连接方式。

集群计算机通常用来改进单个计算机的计算速度和/或可靠性。一般情况下集群计算

机比单个计算机，比如工作站或超级计算机性价比要高得多。根据组成集群系统的

计算机之间体系结构是否相同，集群可分为同构与异构两种。集群计算机按功能和

结构可以分为，高可用性集群（High-availability(HA)clusters）、负载均衡集群

（Loadbalancingclusters）、高性能计算集群（High-performance

(HPC)clusters）、网格计算（Gridcomputing）。

高可用性集群，一般是指当集群中有某个节点失效的情况下，其上的任务会自动转

移到其他正常的节点上。还指可以将集群中的某节点进行离线维护再上线，该过程

并不影响整个集群的运行。

服务器数量、以及由此导致的集群性能是有限的：互连网络容量。也就是说如果一

味地想通过扩大规模来提高集群计算机的性能，它的性价比会相应下降，这意味着

我们不可能无限制地扩大集群的规模。而网格虚拟出空前的超级计算机，不受规

Internet5

模的限制，成为下一代的发展方向。（）集群和网格计算是相互

补充的。很多网格都在自己管理的资源中采用了集群。实际上，网格用户可能并不

清楚他的工作负载是在一个远程的集群上执行的。尽管网格与集群之间存在很多区

别，但是这些区别使它们构成了一个非常重要的关系，因为集群在网格中总有一席

——

之地特定的问题通常都需要一些紧耦合的处理器来解决。然而，随着网络

功能和带宽的发展，以前采用集群计算很难解决的问题现在可以使用网格计算技术

解决了。理解网格固有的可扩展性和集群提供的紧耦合互连机制所带来的性能优势

之间的平衡是非常重要的。

云计算：云计算是最新开始的新概念，它不只是计算等计算机概念，还有运营服

务等概念了。它是分布式计算、并行计算和网格计算的发展，或者说是这些概念的

商业实现。云计算不但包括分布式计算还包括分布式存储和分布式缓存。分布式存

储又包括分布式文件存储和分布式数据存储。

云计算与并行、分布式、网格和集群计算的区别：