Flume与Hive面试题精解：数据传输保障及性能优化策略.pdfVIP

1.Flume如何保证数据不丢？

参：

Source到Channel是有事务机制保证的。

Channel到Sink也是有事务机制保证的。

这两个环节都不会丢失数据。

如果再使用基于文件的Channel，那么Flume就不会丢失数据了。

2.介绍一下Flume中的

参：

Flume中的可以实现对Source到的数据进行解析处理

不同的可以实现不同的功能

例如：

regexextractor可以向满足条件的数据的header中添加key-value

searchrece可以根据一定的规则匹配数据并且修改source到的原始数据内容

3.了解Flume中的负载均衡和故障转移吗？

参：

Flume中的负载均衡和故障转移是为了提高整个系统的容错能力和稳定性。

通过简单配置就可以轻松实现，首先需要设置Sink组，同一个Sink组内有多个子Sink，不同Sink之间可以配置成负载均衡或者故障转移。

4.介绍一下什么是Flume中的选择器？

参：

Source的数据通过Channel选择器来选择写入哪些