《公有云技术与应用》课件——35.MapReduce服务.pptxVIP

;;;;;;;;支持PB级数据并行计算，计算能力随节点数量线性扩展，解决单机存储与计算瓶颈。某社交平台通过MapReduce服务分析10PB用户行为数据，仅用3小时完成用户画像构建，远超传统方法的3天耗时。;支持单集群跨AZ高可用，无单点故障，滚动补丁/升级，任务断链重连，业务0中断；具备网络资源隔离、账号安全、数据安全管控等多级安全保障能力。;计算和存储分离，统一数据湖，消除数据孤岛，一份数据，无需多次拷贝，多种计算引擎，存储和计算资源灵活配比，各自按需扩缩。;支持按需创建计算集群（如临时扩容至50节点处理任务），任务完成后释放资源，按实际使用时长计费，成本比自建固定集群降低50%80%。;;1.Map阶段;2.Shuffle阶段;3.Reduce阶段;3.Reduce阶段;由JobTracker（任务追踪器）和TaskTracker（任务执行器）协同工作：JobTracker负责接收任务、拆分任务、调度节点；TaskTracker运行在每个计算节点，执行Map或Reduce任务并汇报进度。;;;;;;;;