大数据存储与处理二.pptxVIP

;三大关键问题;存储问题;提升吞吐量;三大关键问题;多核技术;;;;三大关键问题;数据容错;计算任务容错;Google是如何解决其大数据处理的三个关键性问题的? 我们需要先了解Google的业务特点。;;Google之前的搜索;Google;;第18页/共50页;? 搜索结果如何排序！;第20页/共50页;? 佩奇（Page），斯坦福; 算法的图论表述;;PageRank（9）– 算法的计算问题;Google三大法宝之一：MapReduce;;想办法解决大规模矩阵相乘问题：我拆;想办法解决大规模矩阵相乘问题：我再拆;子任务;;MapReduce原理;MapReduce机制;MapReduce不仅仅是编程模型!;;Google三大法宝之二：GFS;GFS简介;Google特有的数据和计算;GFS支持大容量;;GFS支持容错 ? 问题：大量廉价PC组件构成的集群作为硬件基础，单节点故障率较高;;① ② ③ ④ ⑤;Google三大法宝之三：BigTable;;为什么需要BigTable？;;;;;