原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
问题分析及解决方案
问题分析：（日志的详细分析过程见cbss‑hbase表无法问题分析‑yinkp)
日志:
2015‑02‑2600:08:00,236DEBUGe3base‑manage3,8600,1423670245147‑BalancerChoremaster.HMaster:Notrunning
balancerbecauseprocessingdeadregionserver(s):e3base‑data1,8602,1423670273386,
e3base‑data2,8602,1423670292648,e3base‑data10,8602,1423670339440,e3base‑data6,8602,1423670332152,
e3base‑data7,8602,1423670382906,e3base‑data4,8602,1423670324350,e3base‑data3,8602,1423670321064,
e3base‑data8,8602,1423670392886,e3base‑data5,8602,1423670327934,e3base‑data9,8602,1423670335682
可知，好多区域服务器挂掉。
分析区域服务器日志:
java.io.IOException:BadresponseERRORforblock
BP‑1901918701‑172.16.212.194‑1422430217642:blk来自数据节点
172.16.212.200:50010
org.apache.hadoop.hdfs.DFSOutputStream$DataStreamer$ResponseProcessor.run(DFSOutputStream.java:819)
2015‑02‑2103:46:08,639警告DataStreamerforfile
/hbase/WALs/e3base‑data1,8602,1423670273386/e3base‑data1%2C8602%2C1423670273386.1424461552049
数据块BP‑1901918701‑172.16.212.194‑1422430217642:blkhdfs.DFSClient:错误
数据块BP‑1901918701‑172.16.212.194‑1422430217642:blk在流水线中的恢复
172.16.212.202:50010,172.16.212.200:50010,172.16.212.206:50010:异常数据节点172.16.212.200:50010
区域服务器上都重复报以上错误。说明是进行写入数据块的时候出现了异常，根源可能在
文件系统上。
分析数据节点日志:
hdfs日志:
2015‑02‑2100:01:28,684警告org.apache.hadoop.hdfs.server.datanode.DataNode:检查磁盘错误:异
常:java.io.IOException:设备上没有剩余空间
可以看到，问题出在磁盘空间不足，导致数据块写入失
败。登录集群，查看集群磁盘信息：
问题分析及解决方案
1.问题分析：（日志的详细分析过程见北京cbss-hbase表无法访问问题分析-yinkp）
HMster日志：
2015-02-2600:08:00,236DEBUG[e3base-manage3,8600,1423670245147-BalancerChore]master.HMaster:Not
runningbalancerbecauseprocessingdeadregionserver(s):e3base-data1,8602,1423670273386,
e3base-data2,8602,1423670292648,e3base-data10,8602,1423670339440,e3base-data6,8602,1423670332152,
e3base-data7,8602,1423670382906,e3base-data4,8602,1423670324350,e3base-data3,8602,1423670321064,
e3base-data
文档评论（0）