Flume-NG配置说明文档V10版..docxVIP

Flume-NG配置说明文档文件状态：[√] 草稿[ ] 正式发布[ ] 正在修改文件标识：说明文档当前版本：V1.0作 者：审 核：完成日期：Flume介绍Flume是Cloudera提供的日志收集系统，后贡献给了Apache。Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方(可定制)的能力。Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统，可有效地收集，汇总和来自许多不同来源的大量日志数据到集中的数据存储系统。Apache的Flume是在Apache软件基金会的顶级项目。目前有两个版本的代码行，0.9.x版本(也称为Flume-OG Flume?original generation)版本以及1.x的版本(也称为Flume-NG Flume next generation版本)。Flume NG 1.x 是Flume 0.9.x的重构版本，去掉了master、zookeeper、collector以及Web console，只有source、sink、channel，成为一个数据传输工具。Flume-NG支持多种source、多种channel、多种sink，而且可扩展性好，可以自定义组件，是一个非常优秀的日志传输系统。FlumeNG数据获取Flume提供了各种source的实现，