运营平台与资源池平台预处理手册1.2(2013-08-29)课程.doc

运营平台与资源池平台问题和故障处理手册 服务台人员禁止以下操作： 不经平台组维护人员共同确认，不能擅自删除log目录下日志文件及升级时存放的临时文件。 擅自删除各系统上其它目录及文件。 擅自修改数据库的配置文件。 擅自修改数据库的相关属性。 擅自删除数据库的相关日志文件。 擅自在SQLPLUS状态下进行数据库的操作。 擅自在正常维护期间执行“kill”命令，尤其是使用-9参数。 擅自在正常维护期间执行停止系统模块的命令。 擅自停止系统及应用进程。 擅自在正常维护期间对网络设备进行修改配置等操作。 服务台人员如有违规，后果自负。 目录 资源池平台 1 告警标题：资源池系统访问异常； 1 告警标题：BC-EC 应用系统状态异常 1 告警标题：X86告警服务器（nagios）异常 2 X86性能数据库异常 2 告警标题：X86 OS部署服务器数据库异常（该应用没有起来） 2 告警标题：X86 子系统运行异常 3 告警标题：BC-EC 数据库（mysql）运行异常 3 告警标题：BC-EC 后台管理程序（OpenNebula） 运行异常 3 告警标题：BC-EC 镜像服务（httpd） 3 告警标题：存储子系统服务异常 4 告警标题：Onest告警采集服务异常（APP） 4 告警标题：Onest告警采集服务异常 4 告警标题：snmp采集子系统访问异常 5 告警标题：对象存储性能采集子系统运行异常 5 告警标题：对象存储访问异常（告警管理平台告警管理系统没有这告警标题） 5 运营平台： 6 告警标题：36的平台服务系统异常告警! 6 告警标题：34的平台服务系统异常告警! 6 常见状况 6 订单无法成功退订 6 客户查询预约号ORDERID与流水号TRANSIDO 9 订单无法成功开通 10 客户无法成功销户 12 客户进行了预约申请，但一直未被审核 13 退订云存储失败 13 退订弹性块存储失败 13 资源池平台 告警标题：资源池系统访问异常； 告警ID：commands_HTTP_NJRS 处理流程：在判断非网络故障后，登录告警设备，执行命令：$ cd /home/cm/glassfish3/glassfish/bin/ $ ./asadmin start-domain domain1 注意事项：禁止在机器上做删除（rm）、停机（init 0）、重启机器（init 5,init6）、关闭或重启其它服务的进程的动作； 误操作后果：a，运营管理平台发出的所有请求，资源池系统都无法接收并处理，简单来说，就是资源池平台已瘫痪，用户不能购买和操作云产品；b，需要重做软件包；c,重新编写配置文件，如果做了误删除的动作，不能在短时间内恢复资源池平台的功能，请谨慎操作； 告警标题：BC-EC 应用系统状态异常 告警ID：commands_HTTP_BCEC 处理流程：登录告警设备，执行命令： $ cd /usr/local/tomcat6/bin/ $ ./startup.sh 注意事项：禁止在机器上做删除（rm）、停机（init 0）、重启机器（init 5,init6）、关闭或重启其它服务的进程的动作； 误操作后果：a,由运营管理平台发起的虚拟机、虚拟机备份、虚拟机加载块存储、块存储请求，BCEC应用系统无法处理; 告警标题：X86告警服务器（nagios）异常 告警ID：commands_mysql-x86-nagios 预处理流程：在判断非网络故障后，登录告警的服务器，启动nagios数据库服务器，执行命令：#service mysqld start 注意事项：禁止在机器上做删除（rm）、停机（init 0）、重启机器（init 5,init6）、关闭或重启其它服务的进程的动作； 误操作后果：a,资源池管理平台无法提供x86系统的告警信息，b，如果误操作把mysql数据库或数据文件删除，资源池平台立即瘫痪，用户通过运营平台发出的指令无法接收；云产品对应、关联信息的数据全部丢失，无法在短时间内恢复业务，请慎之； X86性能数据库异常 告警ID：commands_mysqlcluster-x86 预处理流程：在判断非网络故障后，登录告警的服务器，执行以下命令： #/home/mysqlCluster/mysqlc/bin/ndb_mgmd -f /home/mysqlCluster/my_cluster/ conf/config.ini --configdir=/home/mysqlCluster/my_cluster/conf/ #/home/mysqlCluster/mysqlc/bin/ndbd -