- 118
- 0
- 约5.04千字
- 约 3页
- 2018-11-18 发布于天津
- 举报
Hadoop 2.x中fsimage和edits合并实现
Spark大数据博客 -
Hadoop 2.x中fsimage和edits合并实现
在 《Hadoop 1.x中fsimage和edits合并实现》文章中,我们谈到了Hadoop
1.x上的fsimage和edits合并实现,里面也提到了Hadoop
2.x版本的fsimage和edits合并实现和Hadoop 1.x完全不一样,今天就来谈谈Hadoop
2.x中fsimage和edits合并的实现。
我们知道,在Hadoop
2.x中解决了NameNode的单点故障问题;同时SecondaryName已经不用了,而之前的Hadoop 1.
x中是通过SecondaryName来合并fsimage和edits以此来减小edits文件的大小,从而减少NameN
ode重启的时间。而在Hadoop 2.x中已经不用SecondaryName,那它是怎么来实现fsimage和edit
s合并的呢?首先我们得知道,在Hadoop 2.x中提供了HA机制(解决NameNode单点故障),可
以通过配置奇数个JournalNode来实现HA,如何配置今天就不谈了!HA机制通过在同一个
原创力文档

文档评论(0)