QuidwayS3526系列交换机R0028P01版本发布.doc

RAID卡故障导致零存储集群可用容量为零问题 问题描述： 某局点vStor容量充足的情况下，vStor界面创建LUN时提示可用容量为0。 原因分析： 步骤1：检查vStor和CAS主机的健康状态，发现vStor界面一个节点呈灰色，CAS界面一个节点处于连接异常状态，该节点为CVK15。 步骤2：vStor后台节点查询集群状态lich.cluster --list命令执行失败，CVK15这个节点连接异常。 步骤3：执行lich.cluster --stat命令执行失败，仍然是cvk15这个节点连接异常。 步骤4：ssh客户端登录这个节点登录失败，但是这个节点能够ping通。 步骤5：通过服务器ilo口登录这个节点，屏幕处于黑屏状态。初步确认这个节点处于挂死状态。 步骤6：查看syslog日志，确认处于挂住状态。 Feb 21 05:13:01 Vstor-cvk15 CRON[24132]: root CMD root /opt/bin/novnc_check.sh Feb 21 05:13:01 Vstor-cvk15 CRON[24121]: CRON info No MTA installed, discarding output Feb 21 05:13:01 Vstor-cvk15 CRON[24138]: root CMD root /opt/bin/cha_real_check_cvk.sh Feb 21 05:13:01 Vstor-cvk15 CRON[24122]: CRON info No MTA installed, discarding output Feb 21 05:13:01 Vstor-cvk15 CRON[24120]: CRON info No MTA installed, discarding output Feb 21 05:13:01 Vstor-cvk15 CRON[24119]: CRON info No MTA installed, discarding output Feb 21 05:13:01 Vstor-cvk15 CRON[24123]: CRON info No MTA installed, discarding output Feb 21 05:13:01 Vstor-cvk15 CRON[24115]: CRON info No MTA installed, discarding output Feb 23 22:50:14 B10-Vstor-cvk15 kernel: imklog 5.8.6, log source /proc/kmsg started. Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd: [origin software rsyslogd swVersion 5.8.6 x-pid 2610 x-info ] start Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd: rsyslogds groupid changed to 103 Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd: rsyslogds userid changed to 101 Feb 23 22:50:14 B10-Vstor-cvk15 rsyslogd-2039: Could not open output pipe /dev/xconsole [try /e/2039 ] Feb 23 22:50:14 B10-Vstor-cvk15 kernel: [ 0.000000] Initializing cgroup subsys cpuset Feb 23 22:50:14 B10-Vstor-cvk15 kernel: [ 0.000000] Initializing cgroup subsys cpu 步骤7：查询这个节点的AHS日志信息，确认是Raid卡故障引起。 硬件故障导致CVK异常，使系统处于一种临界状态：能够ping通但是SSH失败的状态。导致零存储一直去获取数据，但是获取数据失败。 解决方案： 联系服务器厂家更换Raid卡，为了安全起见建议先将服务器踢出集群，等待硬件更换完成后再次加入到vStor集群中。 [XXX级别] 华为3Com机密 未经许可不得扩散 第2页 共2页