23.《云计算（第三版）》配套PPT之二十三：第6章 Hadoop 2.0 大家族（四）.pptxVIP

6.1 Hadoop 2.0大家族概述6.2 ZooKeeper6.3 Hbase6.4 Pig6.5 Hive6.7 Flume6.6 Oozie6.9 小结6.8 Mahout6.7 Flume6.7.1 Flume简介6.7.2 Flume入门Flume核心思想是数据流6.7 FlumeFlume逻辑结构某服务cSlave1线上进程不断产生日志Flume读取并发现日志Flume接收并存入HDFSWeb服务器A某服务其他服务cSlave0线上进程不断产生日志Flume读取并发现日志cMasterWeb服务器B某服务云端集群cSlave26.7 FlumeFlume逻辑结构用户可以将Flume看成是两台机器之间通过网络互相传送数据Flume定制了大量的数据源（Thrift、Shell）与数据汇（Thrift、HDFS、Hbase）通过使用“管道”，Flume能够确保不会丢失一条数据，提供了数据高可靠性SinkSourceWebserverChannelHDFS6.7 FlumeFlume组成SourceFlumeChannelSink6.7 FlumeFlume组成Source它负责读取原始数据，目前Flume支持大量类型用户可以自定义Source，使用时在配置文件里声明即可。Channel它负责将从Source端传来的数据存入ChannelFlu