原创力文档- 1、本文档共4页，可阅读全部内容。
- 2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
- 3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
查看更多
大数据处理与分析教材第7、8、9、10章第1页，共4页。
重点与难点内容：静态数据批处理（MapReduce）、流数据实时计算（Storm）、图结构数据（Pregel）和数据可视化。重点：掌握分布式并行编程框架MapReduce、流计算框架Storm和图计算框架Pregel的基本原理。难点：理解MapReduce的工作流程、Storm的设计思想与Pregel的计算模型。第2页，共4页。
内容提纲3.1 静态数据:批处理、MapReduce3.2 流数据：实时计算、Storm3.3 图结构数据：图计算框架Pregel3.4 数据可视化第3页，共4页。
小结大数据包括静态数据/动态数据(流数据)、图结构的数据。静态数据适合采用批处理方式，MapReduce分布式并行编程框架可实现高效的批量数据处理。动态数据需要进行实时计算，Storm是低延迟、可扩展和高可靠的引擎，可有效解决流数据的实时计算问题。图结构的数据，不适合用MapReduce，需要使用图计算框架，Pregel是一个具有代表性的图计算框架。数据可视化让用户更好地理解数据。第4页，共4页。
文档评论（0）