故障分析报告-XXX系统.docVIP

XXXXX系统-故障报告单 故障发现人 通知时间 2010-8-10 08:45 故障受理人 故障处理人 起始时间 08:45 终止时间 10:10 持续时长 两个小时 地点 故障所属系统 故障等级 严重 故障现象 系统web服务down机，导致整个系统无法应用 故障影响范围 公司所有应用人员 故障原因 分析 8月10号上午，XXXXXX系统 TOMCAT的服务DOWN机，通过后台监控发现该DOWN机主要原因是由于最新上线的XXX模块的工单处理查询操作导致，由于界面查询提取SQL语句编写不够规范，导致每次该工单的应用占用耗费很大资源，被同时多次使用后，资源被耗尽导致整个WEB服务DOWN机。 处理结果 优化该界面应用的查询SQL语句。 经验总结 加强测试，上线前使用第三方压力测试软件进行压力测试，经监控后没有BUG问题方可进行上线； 必须严格要求上线前业务部门务必在测试机器上进行测试使用确认后方可上线； 增加数据库所有表数据量的增长记录情况，每月提取一次，进行每月定期，根据实际生产情况提出优化方案（如有必要），增加系统自动监控脚本操作，对系统运行进行监控，如有负载超过2以上的需要保留其数据库后台运行SQL记录及访问界面功能菜单记录； 规范上线时间，每周定时上线，上线前必须确保版本管理，务必记录好每次上线的具体功能代码，确保有故障发生时能迅速定位。 责任分析 该故障为XXX