大数据导论（第二版）课件：数据处理.pptx

;4.1概述;4.1概述;单机模式的处理存储量小；

单机模式的处理效率低；

单机模式的处理速度慢。;快速访问，多用户使用；

资源可以共享；

系统设计灵活；

降低传输风险。;高效的计算模型；

简单的编程接口；

良好的扩展性；

较高的容错性；

高效可靠的输入输出;大数据处理计算模式;4.2大数据的处理平台架构;4.2大数据的处理平台架构;数据源：业务数据、互联网数据、物联网数据、社交数据、第三方数据等

对不同的数据源，需要不同的采集方法。

比如，批量采集的方法，流采集的方式；;开源平台;开源平台;4.3大数据的批量计算;一种适用于大规模并行批处理作业的分布式云服务。批量计算可支持海量作业