Hbase单点故障测试方案.docVIP

1目的 构建一个和实际环境相似的仿真环境，对主、从节点宕机情况下的Hbase数据插入情况进行验证。 2测试环境 为便于实验中节点个数的扩展及配置更改，测试环境中各个节点采用运行在真实物理服务器上 ，一共5台，具体配置如下： 节点配置表 节点名 角色 IP地址 软件配置 配置文件 硬件配置 hadoopDN00 hbase主master 192.168.11.12 Centos5.6 64位 Hadoop-0.20.1-dev Hbase-0.90.3 hadoopDN01 hbase备用master 192.168.11.14 同上 同上 hadoopNN02 zookeeperNode/HRegionsever 192.168.11.16 同上 同上 hadoopDN03 zookeeperNode/HRegionsever 192.168.11.18 同上 同上 hadoopDN04 zookeeperNode/HRegionsever 192.168.11.20 同上 同上 192.168.11.12——192.168.11.20是hdfs的datanode Hdfs的namenode为192.168.11.8 主机名为hadoopNN00 搭建时间同步服务器：如果集群时间不同步，且相差时间超出了hbase默认的3分钟，与master时间差超过3分钟的HRegionserver无法启动。这时候需要架设时间服务器使系统时间同步：搭建时间同步服务器 1、检查ntp服务器有没有安装：rpm -qa ntp centOS默认安装 2、开启ntp服务器 [root@test init.d]# pwd/etc/rc.d/init.d[root@test init.d]# ./ntpd startstarting ntpd: [ OK ] 3、修改ntp.conf配置文件 vi /etc/ntp.conf ①、第一种配置：允许任何IP的客户机都可以进行时间同步将“restrict default kod nomodify notrap nopeer noquery”这行修改成： restrict default nomodify ②、第二种配置：只允许192.168.11.***网段的客户机进行时间同步在restrict default nomodify notrap noquery（表示默认拒绝所有IP的时间同步）之后增加一行： restrict 192.168.11.0 mask 255.255.255.0 nomodify 客户端：ntpdate 服务器端ip地址（例：192.168.11.8） 如果显示 the NTP socket is in use, exiting[root@test init.d]# pwd/etc/rc.d/init.d[root@test init.d]# ./ntpd stopShutting down ntpd: [ OK ] 然后ntpdate 服务器端ip地址 （注：服务器端开启ntp，客户端关闭ntp） 3 异常处理机制测试 Hmaster节点宕机的实验主要设计了以下几种异常情况。具体解决方案如下： 1、配置好Hbase， kill掉主Hmaster进程。 2、插入数据5百万条数据，在插入数据的同时kill掉主Hmaster进程。 3、在切换Hmaster过程中插入数据，看能否新建表。 4、HBase性能调优后，master的切换时间。 动态扩展场景实验描述如下，配置好Hbase,配置另外一台机器分别开机自启动Hmaster和Hregionserver，验证能否随时加入Hmaster和Hregionserver。 3.1Hmaster切换测试过程如下： 1，启动Hbase:start-hbase.sh，会同时启动命令执行机器上的Hmaster，此机器作为主master。 2，启动备用Hmaster：hbase-daemon.sh start master 。启动一个备用master,实际工作的是主master。 3，当主master机器宕机或者kill掉主master上的Hmaster进程后。备用master接管主master。 测试在11：20 kill掉Hmaster 查看Hregionserver上的日志 日志提示在11:21:36,检测到主master失效，之后一直提示无法连接master,直到检测到新的master。 在11:23:46, master切换成功，regionserver可以连接此master。 在11:24:36，regionserver提交自身信息过程，备用master可以正常使用 切换的过程