2-第2章Google云计算原理与应用.pptVIP

  • 1
  • 0
  • 约5.29千字
  • 约 41页
  • 2017-05-30 发布于四川
  • 举报
GFS设计动机 系统架构 GFS特点 Master容错 Chunk Server容错 小结 讨论 MapReduce操作执行流程图 操作过程 操作过程 MapReduce容错 Map: (in_key, in_value) ? {(keyj, valuej) | j = 1…k} Reduce: (key, [value1,…,valuem]) ? (key, final_value) 开发者需编写 两个主要函数 Map输入参数:in_key和in_value,它指明了Map需要处理的原始数据 Map输出结果:一组key,value对,这是经过Map操作后所产生的中间结果 Map: (in_key, in_value) ? {(keyj, valuej) | j = 1…k} Reduce: (key, [value1,…,valuem]) ? (key, final_value) 开发者需编写 两个主要函数 Reduce输入参数:(key, [value1,…,valuem]) Reduce工作:对这些对应相同key的value值进行归并处理 Reduce输出结果:(key, final_value),所有Reduce的结果并在一起就是最终结果 Map的输入参数指明了需要处理哪部分数据,以“在文本中的起始位置,需要处理的数据长度”表示,经过Map处理,

文档评论(0)

1亿VIP精品文档

相关文档