第六章云计算《移动电子商务》钟元生主编,复旦大学出版.pptVIP

云计算相关技术 Bigtable的存储方式 2海量数据存储与处理技术（以Google为例） 2 云计算关键技术 云计算相关技术 (2)数据处理技术 MapReduce是Google提出的并行程序编程模型，运行于GFS之上，用于提供面向海量数据的分析处理能力。 2海量数据存储与处理技术（以Google为例） 2 云计算关键技术 云计算相关技术 海量数据处理平台的大规模性给资源管理与调度带来挑战，现有的相关技术有副本管理技术、任务容错机制等。 副本机制是PaaS层保证数据可靠性的基础，有效的副本策略可以降低数据丢失的风险，能优化作业完成时间。目前，Hadoop采用了机架敏感的副本放置策略。 任务容错机制可以在任务发生异常时自动从异常状态恢复。MapReduce的容错机制在检测到异常任务时，会启动该任务的备份任务。备份任务和原任务同时进行，当其中一个任务顺利完成时，调度器立即结束另一个任务。 3资源管理与调度技术 2 云计算关键技术 云计算相关技术 云计算不仅要为用户提供满足应用功能需求的资源和服务，同时还击要提供优质的QoS(如可用性、可靠性、可扩展、性能等)，以保证应用顺利高效地执行。 首先，用户从自身应用的业务逻辑层面提出相应的QoS需求;为了能够在使用相应服务的过程中始终满足用户的需求，云计算服务提供商需要对QoS水平进行匹配并且与用户协商制定服务水平协议；最后，根据SLA（