51CTO下载解决DellEMC Dirty cache故障的测试报告.doc

解决Dell/EMC Dirty cache 故障的测试报告 ? 问题背景： 在日常的IO 访问中，由于Dell/EMC 存储器的突然断电或者由于关机顺序等原因，如存储器在服务器关闭之前关闭，造成原来正常访问的LUNs 没有挂在SPA 或者SPB 下，而是处于Unowned LUNs 中，而硬件没有任何问题。分析mergelog 日志，会出现如下的错误信息： ? 环境： ? 硬件环境：1 台Dell|EMC CX600（with Access Logix） 2 个SPS+2 个电源 2 台安装Win2k ADS 的主机 4 块HBA 卡（2 块Emulex 和2 块Qlogic） ? 软件环境：Flare code 2.4.1.007（with Access Logix） Navisphere Manager Server6.4.x Navisphere Manager UI 6.4.x Win2k ADS  ? 连接方式：直连 ? 实验步骤： 1. 初始配置CX600，创建1 个包括10 个硬盘的Raid 组，绑定4 个LUNs，分别是LUN0（5GB）、LUN1（6GB）、LUN2（7GB）、LUN3（8GB）。其中LUN0 和LUN1 指定给SPB，LUN2 和LUN3 指定给SPA； 2. 创建2 个Storage 组，分别是Storage Group1 和Storage Group2。分配LUN2 和LUN3 给Storage Group2，主机为Server2； 3. 分配并允许读和写缓存（Read Cache 和Write Cache）； 4. 配置服务器，安装HBA 卡驱动程序，实现相关的初始配置，确保服务器能看到并正常访问这2 个LUNs； ? 故障模拟 5. 在Server2 的2 个LUNs（LUN2 和LUN3）上分别创建2 个分区，共4 个分区； 6. 同时向这4 个分区拷贝数据（注意准备充足的数据量）； 7. 大约过3 至5 分钟之后，同时关闭CX600 上的2 个电源模块，此时主机系统报错； 8. 开启CX600 的2 个电源，待SP 启动完成后，重启主机，此时发现这些LUNs 丢失； 9. 连接并启动Navisphere Manager 去检查LUN 的状态；发现丢失的2 个LUNs 出现在Unowned LUNs 中，不再属于2 个SP； 10.检查SP 中的Events，发现刚刚的2 个LUNs 出现了Cache Dirty，到达此步骤，故障模拟已经完成； ? 解决方案 （注意：依照EMC 支持策略和DELL 与EMC 的协议，以下内容将不能以任何方式让客户知道，包括Symmremote 和Admintool 等，属EMC 保密范畴）。 11.利用EMCRemote 工具，连接到CX600 的任何一个SP，（用户名：clariion，密码：clariion!）； 12.打开一个DOS 窗口，输入“admintool.exe”；出现如下菜单； 13.选择“2”进入恢复选项菜单，然后选择第7 项“Clear CacheDirty LU”； 14.系统将提示你输入passcode（此代码需要联系EMC 去获得，有效期为一天）； 15.输入passcode 之后，系统将检测并列出Cache Dirty 的所有LUNs； 16.输入需要清除dirty cache 的LUNs ID，选择“Y”确认，直到系统提示“Succeded”； 完成后，连接并登陆Navisphere Manager 检查LUNs 的状态，发现出现cache dirty 的LUNs 回到了原来的SP。 18.主机对LUNs 的访问正常，数据正常。整个模拟及恢复测试完成。