HC云计算故障处理.ppt

时间调前的影响 如果将时间调整到当前时间之前的时间点，则需要中止该时间点到当前时间这一段时间的业务受理（如订单和用户审批）。如要将时间从00:00调整为23:00，则需要提前1小时停止业务受理。 如果是将时间到当前时间之前的时间点，可能会覆盖掉系统历史的备份文件和日志文件。 可能造成故障的场景 维护工程师在以下场景时，需要参考本故障处理进行全局时间调整，使系统时间恢复正常。 系统未部署精确外部时钟源，长时间运行后系统整体时间出现了累积偏差。 人为误操作调整了FusionManager系统时间。 人为误操作导致FusionCompute、VDI的某个节点的系统时间出现了累积偏差。 系统时间同步失败导致GE、VDI的某个节点的系统时间出现了累积偏差。 重大事故处理原则 由于重大事故很容易导致大面积的用户虚拟机故障、设备瘫痪等严重后果，具有很大的危害性。为提高重大事故的处理效率、并最大限度降低此类事故的损失，在维护本设备之前，应充分考虑并遵循以下应急处理的基本原则。 应急处理以快速恢复设备的正常运行与业务的提供为核心，因此，提高重大事故处理效率的关键是：客户应参考应急处理手册及时制定各种重大事故的处理预案，并定期组织相关管理人员与维护人员进行学习、演练。 以客户业务尽快恢复，对客户影响最低为原则。在此前提下，进行问题定位恢复和数据收集。 维护人员在上岗前必须接受必要的应急处理培训，学习判断重大事故的基本方法、掌握处理重大事故的基本技能。 在重大事故的处理过程中，维护人员应及时联系华为公司客户服务中心或华为公司驻当地办事处，以便能够快速获取华为公司的技术支持。 当维护人员完成重大事故的处理以后，应该及时采集与本次事故有关的设备故障告警信息，并将相关的事故处理报告、设备告警文件、日志文件等发送给华为公司相应部门进行分析与定位，以便华为公司能够更好地为客户提供售后服务。 业务快速恢复原则 业务恢复应综合考虑相应操作恢复业务成功的可能性和相应操作时间代价。参考的操作排序如下： 耗时比较短，成功可能性比较大的操作。 耗时比较短，成功可能性比较小的操作。 耗时比较长，成功可能性比较大的操作。 由于重大事故很容易导致大面积的用户虚拟机故障、设备瘫痪等严重后果，具有很大的危害性。为提高重大事故的处理效率、并最大限度降低此类事故的损失，在维护本设备之前，应充分考虑并遵循以下应急处理的基本原则。 * 使用“PuTTY”，登录故障链路一端的服务器。 以“root”用户，通过“管理IP地址”登录。 执行以下命令，防止“PuTTY”超时退出。 TMOUT=0 执行以下命令，查看该服务器的网卡信息。 lspci 命令回显中是否包含所有网卡信息？ 是，执行步骤 20。 否，执行步骤 18。 更换服务器的故障网卡 更换服务器的故障网卡。 链路是否恢复正常？ 是，处理完毕。 否，执行步骤 20。 查看故障链路的接口速率和双工模式 说明： 根据链路作用的不同，存在以下两种情况： 当故障链路是交换机到服务器的链路时，需要分别执行步骤 20和步骤 21查看服务器和交换机的接口速率和双工模式。 当故障链路是交换机到交换机的链路时，需要执行步骤 21，分别查看链路两端交换机接口的速率和双工模式。 执行以下命令，查看服务器网卡的速率和双工模式。 ethtool eth0 显示如下类似信息：Settings for eth0: Supported ports: [ TP ] Supported link modes: 10baseT/Half 10baseT/Full 100baseT/Half 100baseT/Full 1000baseT/Full Supports auto-negotiation: Yes Advertised link modes: 10baseT/Half 10baseT/Full 100baseT/Half 100baseT/Full 1000baseT/Full Advertised auto-negotiation: Yes Speed: 1000Mb/s //网卡当前速率 Duplex: Full //网卡双工状态 Port: Twisted Pair PHYAD: 1 Transceiver: internal Auto-negotiation: on Supports Wake-on: g Wake-on: d Link detected: yes 在交换机用户视图界面，执行以下命令，查看故障链路的接口速率和双工模式。 说明： 当故障链路是交换机到交换机的链路时，需要分别查看链路两端交换机接口的速率和双工模式。 display interface gigabitethernet 0/0