Flume的安装与配置学生操作手册.docx

Flume的安装与配置学生操作手册

1.1、什么是Flume

ApacheFlume（简称Flume）是一种分布式、基于流水线模型、可靠、容错、易于管理的架构，可以收集、日志记录和转移大量数据，特别适合收集日志文件，如Apache服务器日志或系统日志。

Flume的架构主要由Flume代理、Flume事务管理器和接收端组成，它们分别负责数据的收集、路由和存储。

Flume代理充当节点和连接器之间的中间层，它接收节点上的数据，然后基于源定义的路由规则将数据路由到一个或多个目标连接器上。

Flume事务管理器负责Flume代理发来的数据，它负责检查数据是否有效，然后针对节点发来的数据，采用数据分