邮件队列过大应急预案.pdfVIP

一、事故现象描述

邮件队列过大，导致收发邮件异常

二、影响范围

会造成部分服务不能正常运行时间30--70

三、应急措施

a)根据故障影响范围逐级通报（通报管理层）

1，整体业务不能正常进行，通报IT技术部总经理等

2，部分业务不能正常进行，通报运维经理和研发经理等

3，业务不受影响，通报运维经理

b)人员调配（是否要赶到现场）

无需在现场，可支持

系统工程师：严亮、李晴、

研发：马超湖、李海林、高金力

网络工程师：王华

DBA：陈传忠、俞隽、开林俊、张建波、卢坚

测试：魏嘉懿

：徐琦韡

c)应急措施办法

1，人员发现问题并通知系统工程师5-10分钟

2，系统工程师排查错误，可能有邮件限制，

，服务器性能等问题，排查问题，修改参数，如果是黑

客，则迅速找到源及时隔，尤其注意邮件的安全认

证，杜绝邮件转发（如非工作时间则由最近工程师赶往工

作电脑实施操作）10—50分钟

3，测试人员进试，并报告测试结果

d)处理结果

由系统工程师确认虚拟机恢复正常

确认已解除

四、后续跟进（硬件保修、系统配置备份、数据备份、安装防范软

件等）

1，加强

2，设置多节点，防止出现单点故障

五、事故解决后的处理办法

a)如何防范（如果可以防范）

memcache服务端的连接数、io、负载等信息，异

常立即处理

b)硬件如何处置（如果有硬件替换下来）

无

c)如何做到提前（如果可以做到的提前）

主要观察负载，过载则及时处理

d)是否需要后期投入，投入后可以达到什么效果。

可更换成商业软件，在的技术支持下bug可被修复或

避免，并且可很好的提高业务处理性能