Flume简介00课件讲解.pptVIP

Flume简介

2知识目标Flume数据流模型Flume应用场景Flume架构01能力目标Flume数据流模型Flume应用场景Flume架构02学习目标

3学习任务Flume数据流模型Flume应用场景Flume架构

4目录01Flume数据流模型02Flume应用场景03Flume架构

数据流模型5Flume事件被定义为具有字节有效载荷和一组可选字符串属性的数据流单元。Flume代理是一个（JVM）进程，用于承载事件从外部源流向下一个目标（跳转）的组件

数据流模型6三个组件：Source、Channel、SinkFlume运行机制flume的核心就是一个agent，这个agent对外有两个进行交互的地方，一个是接受数据的输入——source。一个是数据的输出sink，sink负责将数据发送到外部指定的目的地。source接收到数据之后，将数据发送给channel，chanel作为一个数据缓冲区会临时存放这些数据，随后sink会将channel中的数据发送到指定的地方—-例如HDFS等。

数据流模型7复杂流程flume允许用户构建多跳流，其中事件在到达最终目的地之前通过多个代理传播。它还允许扇入和扇出流，上下文路由和备份路由（故障转移），用于失败跳。

Flume应用场景8比如我们再做一个电子商务网站，我们想根据消费用户中访问点特定的节点区域来分析消费者的行为或者购买意图。这