重庆移动数据namenode重启异常分析报告.pdfVIP

重庆移动数据namenode重启异常分析

安装配置：版本：CDH4.1.2

现象：HDFS经历过主备切换，当前处于standby的namenode进程后重新启动失败。所以HDFS

存在单节点的隐患，但集群仍工作正常。

启动异常的namenode日志：

2015-01-2620:49:59,804ERRORorg.apache.hadoop.hdfs.server.namenode.FSImage:Errorreying

editlogatoffset2097152.ExpectedtransactionIDwas237749709

org.apache.hadoop.hdfs.server.namenode.RedundantEditLogInputStream$PrematureEOFException:got

prematureend-of-fileattxid237749708;expectedfiletogoupto237755936

at

org.apache.hadoop.hdfs.server.namenode.RedundantEditLogInputStream.nextOp(RedundantEditLogInp

utStream.java:195)

at

org.apache.hadoop.hdfs.server.namenode.EditLogInputStream.readOp(EditLogInputStream.java:75)

at

org.apache.hadoop.hdfs.server.namenode.FSEditLogLoader.loadEditRecords(FSEditLogLoader.java:138)

at

org.apache.hadoop.hdfs.server.namenode.FSEditLogLoader.loadFSEdits(FSEditLogLoader.java:93)

atorg.apache.hadoop.hdfs.server.namenode.FSImage.loadEdits(FSImage.java:715)

atorg.apache.hadoop.hdfs.server.namenode.ha.EditLoiler.doTailEdits(EditLoiler.java:227)

at

org.apache.hadoop.hdfs.server.namenode.ha.EditLoiler$EditLoilerThread.doWork(EditLoiler.jav

a:321)

at

org.apache.hadoop.hdfs.server.namenode.ha.EditLoiler$EditLoilerThread.access$200(EditLoile

r.java:279)

at

org.apache.hadoop.hdfs.server.namenode.ha.EditLoiler$EditLoilerThread$1.run(EditLoiler.java

:296)

atorg.apache.hadoop.security.SecurityUtil.doAsLoginUserOrFatal(SecurityUtil.java:452)

at

org.apache.hadoop.hdfs.server.namenode.ha.EditLoiler$EditLoilerThread.run(EditLoiler.java:2

92)

2015-01-2620:50:00,121WARNorg.apache.hadoop.hdfs.server.namenode.ha.Ed