Hadoop技术与应用 课件 项目9 利用Flume监听数据.ppt

点击添加文本点击添加文本点击添加文本点击添加文本任务2Flume监听Hive日志文件并将监听到的数据输出到Flume控制台2.HDFSSink常用属性列表HDFSSink是FlumeSink提供的重要类型之一，HDFSSink接收器将事件写入Hadoop分布式文件系统（HDFS）。它支持创建文本和序列文件，并支持各种类型文件的压缩。可以根据经过的时间、数据大小或事件数定期滚动文件（关闭当前文件并创建一个新文件）。HDFS目录路径可能包含格式化转义序列，这些序列将由HDFS接收器取代，以生成用于存储事件的目录/文件名。使用此接收器需要安装Hadoop，以便Flume可